[PYTHON] Einzeiliges Web-Scraping mit tse

Einführung

Es ist der 23. Tag von Crawler / Web Scraping Adventskalender 2015. Es dient auch als Adventer Parfüm Adventskalender 2015 m (_ _) m

Ich möchte das einzeilige Web-Scraping mit dem Textformatierungstool "tse" von Python einführen.

Was ist tse?

Weitere Einzelheiten finden Sie auf der Folie, die Herr Ishimoto auf der diesjährigen PyCon JP 2015 vorgestellt hat. tse - Textformatierungsdienstprogramm von Python

Ich habe neulich einen Einführungsartikel über tse geschrieben, also beziehen Sie sich bitte auch darauf. tse - Einführung in den Textstrom-Editor in Python

Erhalten Sie die neuesten Nachrichten von Parfüm

Werfen wir einen kurzen Blick auf die neuesten Nachrichten von Music Natalie, um unsere Gedanken so zu organisieren, dass wir nächste Woche die Leistung von Perfume in der Red and White Song Battle genießen können.

Eigentlich versuchen

curl http://natalie.mu/music/news/list/artist_id/217 | tse -ms 'bs4' -b 'for dt in BeautifulSoup(sys.stdin.read(), "lxml").find_all("dt", class_="NA_title", limit=30):{{print(dt.string)}}'

Ausgabe


V6 in rot und weiß&Parfüm spielt mit Mickey und anderen die Hauptrolle, Arashi mit "Star Wars"
ARASHI, AKB, Babymeta, X JAPAN und andere "M Ste Super Live" Songansage
"Red and White Song Battle" Sachiko Kobayashi zeigt "Senbon Sakura"
CDTV Neujahrsnummer aiko, Areki, KANA-BOON、T.M.R., Parfüm, Gen Hoshino et al.
Das Parfüm hebt das Teaser-Verbot für die Jubiläums-Budokan-Live-Videosammlung auf
Vorführung von Parfümdokumentationen, BiS Cano und anderen bei Musik- und Filmveranstaltungen
48 & 46, Stada, Halo Pro gemischtes Medley! Live-spezialisierte "FNS Kayosai" 16. OA
Wunderschöne Menschen feiern den Geburtstag von Kawatani Eon, dem größten Ein-Mann-Erfolg von Indigo la End in der Geschichte
42 luxuriöse Gruppen wie Mischil, Larque, YUKI, Babymeta, Arashi, X JAPAN zum Jahresende SP
Parfüm x Wettbewerb Karuta, neues Lied im Trailer des Films "Chihayafuru"
"Fake drei Töchter" sind auch gekommen! Parfüm, Pornografie, Ryunosuke Kamiki und andere wunderschöne Co-Stars im 23. Jahr "AAA"
Originalautor & Suzu Hirose beeindruckt, Parfüms Titelsong neu geschrieben für den Film "Chihayafuru"
Es gibt Tränen, Lachen und Nachahmung! Das 66. Rot-Weiß-Kandidateninterview von Delight
BUMP, Nogizaka, Gen Hoshino, Guess, μ in rot und weiß's et al. 10 Gruppen ersten Auftritt! X JAPAN ist der erste seit 18 Jahren
Parfüm wird zum Charakter von Mercedes-Benz, entworfen von Yoshiyuki Sadamoto
Parfüm Budokan live wird visualisiert, 10DAYS Digest & alle Performances in der ersten Ausgabe
Parfüm, KANA für Chat-Projekt "Konason Festival"-BOON, Theater Brook
29 Gruppen, darunter Aiko, Ikimono, Kyary, Sekaowa usw.
Arashi, Parfüm, 3. Generation, Momokuro, Hoshino Gen et al. Bei "FNS Kayosai"
Zu den "MTV VMAJ" -Siegern zählen Gen Hoshino, JSB III, Amuro und andere
Nächste Woche "M Ste" Ikimono, NMB, Sakurako Ohara, Jani Seki, bknb, Parfüm
Wieder "Parfüm erstaunlicher Entertainer"! Regel Porsche, Asagaya Schwester Watanabe auf der Bühne
Parfüm, 5 Alben aus der Tokuma-Ära werden in analoge umgewandelt
Garnelen im nächsten "Kai", TOKIO, Parfüm, KANA-BOON, Gudomo erschien
Parfüm, Preis des Ministers für innere Angelegenheiten und Kommunikation/Gewinner des ACC Grand Prix "Ich bin froh, dass das Team bewertet wurde"
Parfüm Yahoo!Suche Kisekae "STAR TRAIN" Ver.Aussehen
Parfüm, Ikimonokari und TOKIO erscheinen auf dem nächsten "CDTV"
"Großer Fan seit mehreren Jahren" Ken Shimura nominierte Perfume als Gesprächspartner und sendete es per E-Tele
"Drei Menschen die ganze Zeit zusammen" Parfüm enthüllt auf dem Filmfestival Zukunftsträume
Parfüm, Paruru, ELT, Mamoru Miyano, GACKT und andere erscheinen auf dem Roten Teppich beim Tokyo International Film Festival

Gesponserter Artikel

"V6 & Perfume spielen zusammen mit Mickey und anderen in Rot und Weiß die Hauptrolle. Arashi markiert" Star Wars "."

Diese Nachricht ist schrecklich! Zusammenarbeit zwischen Parfüm und Disney! !! 14.08.2013 Die Aufregung von NHK General TV "Die magische Melodie, die alle verbindet" Disney & Ghiblis Meisterwerk "" ist zurück! !! !! https://www.youtube.com/watch?v=qdPDeG_XxaU

Kommentar

tse -ms-Import mit <Modulname Import * Format> -b - Sofort nach dem Start auszuführende Aktion {{}} - Geben Sie den einzurückenden Block an

Dank der Option -ms von tse konnte ich BeautifulSoup in einem Liner ausführen!

abschließend

Bisher haben wir die Einzeiler-Web-Scraping-Technik mit tse eingeführt.

tse ist sehr praktisch, da Sie die gewohnte Beschreibung in Python auf einen Liner anwenden können! Bitte verwenden Sie es in anderen Szenen als Parfüm.

Übrigens, Crawler / Web Scraping Adventskalender 2015 ist gleich um die Ecke! Lassen Sie uns darauf achten, dass wir am letzten Tag nicht von @ jz5 als Nicht-Poster des Adventskalenders entlarvt werden.

Recommended Posts

Einzeiliges Web-Scraping mit tse
Bildersammlung mit Web Scraping
Web Scraping
Web Scraping (Prototyp)
Erste Schritte mit Web Scraping
Web Scraping mit Python + JupyterLab
EXE Web API von Python
Speichern Sie Bilder mit Web Scraping
WEB-Scraping-Technologie und Bedenken
Kompromisse beim Web Scraping & Crawlen
Einfaches Web-Scraping mit Scrapy
Web Scraping mit Selenium (Python)
Web Scraping mit AWS Lambda
Web Scraping Anfänger mit Python
Sammeln Sie nur Gesichtsbilder einer bestimmten Person mit Web Scraping
Holen Sie sich Splunk Download-Link durch Scraping
Scraping von Alexas Web Rank mit pyQuery
Web Scraping mit Python Erster Schritt
Ich habe versucht, WebScraping mit Python.
GAN: DCGAN Part1 - Webbilder abkratzen
Eine Sammlung von einzeiligen Webservern
Web Scraping für Anfänger in Python (1)
Web Scraping für Wetterwarnbenachrichtigungen.
Web Scraping für Anfänger in Python (4) -1
Ich habe versucht, einzeilige Webserver zu sammeln
10 Fragen, die vor dem Web-Scraping überprüft werden müssen