[Python] Mémo de création de l'outil de grattage

Principalement des mémos pour moi.

objectif

Créer un outil de grattage pour obtenir des données pachinko

conception

Acquisition des données de l'unité [OK jusqu'au test]

C'est un programme pour obtenir le nombre de G et le nombre de grands succès. C'est presque terminé, et nous avons pu acquérir 5 unités dans le test, nous devrions donc pouvoir les acquérir toutes sans aucun problème. Cliquez ici pour le flux d'acquisition

1. Créez une liste d'URL
2. Accédez à la liste d'URL dans l'ordre
3. Obtenez les informations souhaitées lorsque vous y accédez et créez une liste → Par exemple, si vous souhaitez obtenir le nombre de BB et le nombre de G, créez une liste pour chacun.
4. Convertissez la liste en bloc de données

J'ai également essayé de l'obtenir avec read_html dans une table, mais lorsque je rejoins chaque bloc de données, je ne peux pas bien me joindre, donc je n'ai obtenu que les informations que je veux dans une liste et les ai converties et jointes dans un bloc de données. ..

Après cela, ajustez le type des données acquises.

Acquisition du graphe d'affaissement [OK jusqu'au test]

C'est un programme pour acquérir le graphe d'affaissement de chaque unité.

Cliquez ici pour le flux d'acquisition auquel vous pensez

1. Créez une liste d'URL (la liste est la même que les données de la machine)
2. Créez une liste d'URL d'image
3. Obtenez l'URL de l'image et ajoutez-la à la liste → Le point à noter est que vous n'avez pas à vous soucier de le tourner avec une instruction for car vous ne voulez qu'une image sur chaque page.
4. Créez une fonction pour télécharger des images
5. Télécharger l'exécution → Correction pour imprimer l'erreur

Il est à noter sur l'image que le SRC est en partie un chemin relatif, si le site prend des mesures pour les données du jour. Je ne peux pas sentir la régularité de quel modèle a un chemin relatif. Par conséquent, les données à acquérir sont essentiellement les données de la veille. Il est nécessaire de rechercher à quelle heure le site changera.

Conversion des données du graphique [OK jusqu'au test]

Ensuite, c'est un programme qui analyse l'image du graphique d'affaissement et la convertit en données.

Cliquez ici pour le flux de réflexion

1. Analyse basée sur l'image acquise
2. Ajoutez des informations d'analyse à la liste
3. Recalculez les informations d'analyse dans la liste
4. Convertir en bloc de données
5. Fusionner avec la première trame de données

Sommaire

C'est particulièrement proche de mes propres notes, donc je ne pense pas que cela soit utile à personne.