Überblick

Ich studiere mit Bezug auf O'Reilly Japans "Datenvisualisierung beginnend mit Python und JavaScript".

Abrufen von Webdaten mithilfe der Anforderungsbibliothek

Pythons "Requests" ist eine Bibliothek, die die Handhabung von HTTP-Interaktionen in Python erleichtert.

Vorbereitungen

Installieren Sie Anforderungen

pip install requests

In Version 2.7.9 oder früher kann eine SSL-Warnung auftreten. Aktualisieren Sie in diesem Fall auf eine neue SSL-Bibliothek, um das Problem zu beheben.

pip install --upgrade ndg-httpsclient

Beispiel für die Verwendung der Anforderungsbibliothek

Wikipedia-Seite herunterladen (HTML-Seite und Inline-JavaScript herunterladen)

>>> import requests
>>> response = requests.get("https://ja.wikipedia.org/wiki/Python");
>>> 
>>> #Ruft eine Liste der Attribute des responsep-Objekts ab
>>> dir(response)
['__attrs__', '__bool__', '__class__', '__delattr__', '__dict__', '__dir__', '__doc__', '__enter__', '__eq__', '__exit__', '__format__', '__ge__', '__getattribute__', '__getstate__', '__gt__', '__hash__', '__init__', '__init_subclass__', '__iter__', '__le__', '__lt__', '__module__', '__ne__', '__new__', '__nonzero__', '__reduce__', '__reduce_ex__', '__repr__', '__setattr__', '__setstate__', '__sizeof__', '__str__', '__subclasshook__', '__weakref__', '_content', '_content_consumed', '_next', 'apparent_encoding', 'close', 'connection', 'content', 'cookies', 'elapsed', 'encoding', 'headers', 'history', 'is_permanent_redirect', 'is_redirect', 'iter_content', 'iter_lines', 'json', 'links', 'next', 'ok', 'raise_for_status', 'raw', 'reason', 'request', 'status_code', 'text', 'url']
>>>
>>> #Ruft den HTTP-Statuscode vom Antwortobjekt ab
>>> response.status_code
200
>>>
>>> #Sie können die HTML-Seite und Inline-JavaScript abrufen, indem Sie die Texteigenschaft des Antwortobjekts abrufen
>>> response.text
'<!DOCTYPE html>\n<html class="client-nojs" lang="ja" dir="ltr">\n<head>\n<meta charset="UTF-8"/>\n<title>Python - Wikipedia</title>\n<script>document.documentElement.className = document.documentElement.className.replace( /(^|\\s)client-nojs(\\s|$)/, "$1client-js$2" );</script>\n<script>(window.RLQ=window.RLQ||[]).push(function(){mw.config.set({"wgCanonicalNamespace":"","wgCanonicalSpecialPageName":false,"wgNamespaceNumber":0,"wgPageName":"Python","wgTitle":"Python","wgCurRevisionId":65321720,"wgRevisionId":65321720,"wgArticleId":993,"wgIsArticle":true,"wgIsRedirect":false,"wgAction":"view","wgUserName":null,"wgUserGroups":["*"],"wgCategories":["Programmiersprache","Objektorientierte Sprache","Skriptsprache","Open Source","Python"],"wgBreakFrames
...

Daten im JSON-Format abrufen

>>> import requests
>>> response = requests.get("https://www.oreilly.co.jp/books/9784873118086/biblio.json");
>>> 
>>> #JSON-Daten abrufen
>>> data = response.json()
>>> data
{'title': 'Datenvisualisierung beginnend mit Python und JavaScript', 'picture_large': 'http://www.oreilly.co.jp/books/images/picture_large978-4-87311-808-6.jpeg', 'picture': 'http://www.oreilly.co.jp/books/images/picture978-4-87311-808-6.gif', 'picture_small': 'http://www.oreilly.co.jp/books/images/picture_small978-4-87311-808-6.gif', 'authors': ['Kyran Dale\von u3000', 'Takeshi Shimada\übersetzt von u3000', 'Tetsuya Kinoshita\u3000 Übersetzung'], 'released': '2017-08-25', 'pages': 500, 'price': 4104, 'ebook_price': 3283, 'original': 'Data Visulalization with Python and JavaScript', 'original_url': 'http://shop.oreilly.com/product/0636920037057.do', 'isbn': '978-4-87311-808-6'}
>>> 
>>> #Schlüsselwert abrufen
>>> data.keys()
dict_keys(['title', 'picture_large', 'picture', 'picture_small', 'authors', 'released', 'pages', 'price', 'ebook_price', 'original', 'original_url', 'isbn'])
>>> 
>>> #Titel holen
>>> data["title"]
'Datenvisualisierung beginnend mit Python und JavaScript'

Referenz

Datenvisualisierung beginnend mit Python und JavaScript https://www.oreilly.co.jp/books/9784873118086/

Anfragen: HTTP für Menschen http://requests-docs-ja.readthedocs.io/en/latest/user/quickstart/ 　　 Nächstes Mal werden wir untersuchen, wie Daten aus der Web-API verwendet werden.