Ich habe versucht, Yahoo Wetter zu kratzen (Python Edition)
Einführung
Es ist nah an meinem eigenen Memo, aber ich habe es versucht, also habe ich einen Artikel geschrieben. Ursprünglich habe ich viel recherchiert, um Raspet Pie Signage zu machen. Ich hatte nicht genau die Informationen, die ich wollte, also untersuchte ich nur die Schabemethode und schaffte es selbst. (Ich war kein Python-Benutzer oder eine Person im Webbereich, also hatte ich einen Moment lang Probleme ...) Yahoo hat eine Wetter-API, aber ich habe sie nicht verwendet, weil ich nur die Niederschlagsmenge kenne.
C # Edition https://qiita.com/MonoShobel/items/3ae0c051d2aadba698a4 Es gibt.
Referenzen Ich habe beim Scraping mit Python auf den folgenden Artikel verwiesen. [Mit Python kratzen und Google Home über die Wettervorhersage sprechen lassen](https://xn--u9jwc776tibf.net/?p=1494) [Einführung in die Python-Web-Scraping-Praxis](https://qiita.com/Azunyan1111/items/9b3d16428d2bcc7c9406)
Es gibt gute und schlechte Erklärungen zum Schaben selbst, deshalb sollten Sie es lesen.
Übrigens ist es Yahoo-Wetter, aber vielleicht ist das Schaben nicht verboten. Yahoo Finance wurde ausdrücklich verboten, aber ich konnte keine Erwähnung des Wetterverbots finden. Halten Sie einfach die Mäßigung. Selbst wenn Sie regelmäßig kratzen, denke ich, dass der Zugang jede Stunde oder 30 Minuten für das Wetter ausreicht.
Was ist zu tun?
Ich habe viele Informationen, die ich erhalten möchte, aber vorerst habe ich das Wetter für heute in Tokio.
Holen Sie sich das Wetter von heute und morgen im Bild unten.
Code
Sie können das Wetter in Tokio heute und morgen abrufen, indem Sie den Code tatsächlich ausführen. (Ich habe verschiedene Dinge mit Visual Code geschrieben und zurückgesetzt.)
Meistens finden Sie in den Kommentaren, was Sie tun.
Es ist fast eine Quelle zum Kopieren und Einfügen, aber der Punkt von Interesse ist, dass der Textteil von select_one erfasst wird.
Ich habe versucht, es automatisch mit Google Chrome zu bekommen, aber es hat nicht funktioniert, also habe ich von Hand gesucht und es hat funktioniert.
tenki.py
import urllib3
from bs4 import BeautifulSoup
#URL für den Zugriff
url = 'https://weather.yahoo.co.jp/weather/jp/13/4410.html'
#Zugriffs-URL Der Rückgabewert ist eine Instanz, die das Ergebnis von Zugriff und HTML enthält.
http = urllib3.PoolManager()
instance = http.request('GET', url)
#Extrahieren Sie HTML aus der Instanz und analysieren Sie es für die Verwendung mit Beautiful Soup
soup = BeautifulSoup(instance.data, 'html.parser')
#Holen Sie sich den Wettertext mit der CSS-Auswahl.
#das heutige Wetter
tenki_today = soup.select_one('#main > div.forecastCity > table > tr > td > div > p.pict')
print ("Wie ist das Wetter heute"+tenki_today.text)
#Das Wetter von morgen
tenki_tomorrow = soup.select_one('#main > div.forecastCity > table > tr > td + td > div > p.pict')
print ("Das Wetter von morgen"+tenki_tomorrow.text)
#Warten Sie auf die Eingabe, damit der Bildschirm nicht sofort verschwindet
input()
tenki.py
import urllib3
from bs4 import BeautifulSoup
#URL für den Zugriff
url = 'https://weather.yahoo.co.jp/weather/jp/13/4410.html'
#Zugriffs-URL Der Rückgabewert ist eine Instanz, die das Ergebnis von Zugriff und HTML enthält.
http = urllib3.PoolManager()
instance = http.request('GET', url)
#Extrahieren Sie HTML aus der Instanz und analysieren Sie es für die Verwendung mit Beautiful Soup
soup = BeautifulSoup(instance.data, 'html.parser')
#Holen Sie sich den Wettertext mit der CSS-Auswahl.
#das heutige Wetter
tenki_today = soup.select_one('#main > div.forecastCity > table > tr > td > div > p.pict')
print ("Wie ist das Wetter heute"+tenki_today.text)
#Das Wetter von morgen
tenki_tomorrow = soup.select_one('#main > div.forecastCity > table > tr > td + td > div > p.pict')
print ("Das Wetter von morgen"+tenki_tomorrow.text)
#Warten Sie auf die Eingabe, damit der Bildschirm nicht sofort verschwindet
input()
Unten das Ausführungsergebnis
Am Ende
Ich denke, Sie können verschiedene Dinge basierend auf diesem Code tun.
Ich denke, dass ich es diesem Artikel hinzufügen oder in den Artikel von Razpai Signage schreiben werde, beispielsweise um es regelmäßig zu erwerben.
Ich denke auch, dass es aufgrund von Umweltproblemen nicht ausgeführt werden konnte, deshalb werde ich das später hinzufügen.
Recommended Posts
Recommended Posts