Lassen Sie uns Python Janome einfach verwenden

Was ist Pythons Janome-Bibliothek?

Es zerlegt Japanisch mit dem im Wörterbuch enthaltenen "morphologischen Analysator"!

Janome offizielle Dokumentation

https://mocobeta.github.io/janome/

Lassen Sie es uns einfach verwenden

Umgebung

$ python3 -V
Python 3.7.3

Aufbau einer virtuellen Umgebung

$ mkdir janome-sample    
$ cd janome-sample 
$ python3 -m venv venv
$ source ./venv/bin/activate

Wordcloud-Installation

$ pip install janome

Führen Sie Janome aus

$ python3
Python 3.7.3 (default, Mar  6 2020, 22:34:30) 
[Clang 11.0.3 (clang-1103.0.32.29)] on darwin
Type "help", "copyright", "credits" or "license" for more information.

>>> from janome.tokenizer import Tokenizer
>>> t = Tokenizer()
>>> for token in t.tokenize(u'Am Ende des Liedes eilte Gauche mit einem Cello so schnell wie die Katze in die Umkleidekabine, ohne alle mehr anzusehen.'):
...   print(token)
... 
Song-Nomenklatur,Allgemeines,*,*,*,*,Lied,Kyoku,Kyoku
Ist ein Assistent,Fallassistent,Allgemeines,*,*,*,Aber,Ga,Ga
Endverb,Unabhängigkeit,*,*,Fünf Schritte, La Linie,Grundform,Ende,Owar,Owar
Und Hilfswörter,Verb verbinden,*,*,*,*,Wann,Zu,Zu
Gauche Substantiv,Allgemeines,*,*,*,*,Gauche,*,*
Ist ein Assistent,Hilfe,*,*,*,*,Ist,C.,Beeindruckend
Schon ein Zusatz,Allgemeines,*,*,*,*,Bereits,Mou,Mo.
Jeder kein Substantiv,Gleichbedeutend,Allgemeines,*,*,*,Jedermann,Minna,Minna
Hilfswörter,Union,*,*,*,*,von,Nein,Nein
Nomenklatur,Nicht unabhängig,Allgemeines,*,*,*,Einer,Hou,Ho
Etc.,Hilfsmittel,*,*,*,*,Eine solche,Nad,Nad
Ist ein Assistent,Hilfe,*,*,*,*,Ist,C.,Beeindruckend
Schau Verb,Unabhängigkeit,*,*,Ein Schritt,Kontinuierlicher Typ,sehen,Mi.,Mi.
Auch Assistent,Hilfe,*,*,*,*,Ebenfalls,Mo.,Mo.
Se verb,Unabhängigkeit,*,*,Sahen / Suru,Nu Verbindung,Machen,Se,Se
Zu Hilfsverb,*,*,*,Besondere,Kontinuierliche Verbindung,Nu,Zu,Zu
Nur ein Zusatz,Allgemeines,*,*,*,*,Gerade,Choud,Chode
Dieser Zusatz,*,*,*,*,*,Das,Sono,Sono
Cat Nomen,Allgemeines,*,*,*,*,Katze,Katze,Katze
Hilfswörter,Union,*,*,*,*,von,Nein,Nein
Yo Substantiv,Nicht unabhängig,Hilfsverbstamm,*,*,*,Yo,Du,Yo
Hilfs,Adjunct,*,*,*,*,Zu,D.,D.
Schnelle Adjektive,Unabhängigkeit,*,*,Apokalypse,Kontinuierliche Verbindung,Schnell,Subayak,Subayak
Cyril Nomen,Allgemeines,*,*,*,*,Cyril,Cyril,Cyril
Hilfs,Fallassistent,Allgemeines,*,*,*,Zu,Wo,Wo
Mot Verb,Unabhängigkeit,*,*,Fünf Schritte / Ta-Linie,Kontinuierliche Verbindung,Haben,Mot,Mot
Der Assistent,Verb verbinden,*,*,*,*,Hand,Te,Te
Ankleidezimmer Nomen,Allgemeines,*,*,*,*,Umkleideraum,Gakuya,Gakuya
Zum Assistenten,Fallassistent,Allgemeines,*,*,*,Was,F.,D.
Liao Substantiv,Allgemeines,*,*,*,*,Liao,*,*
Ge Substantiv,Suffix,Allgemeines,*,*,*,Ge,Ge,Ge
Enthaltenes Verb,Unabhängigkeit,*,*,Fünf Schritte, Ma Linie,Kontinuierlicher Typ,Reinkommen,Komi,Komi
Masu Hilfsverb,*,*,*,Spezial / Masse,Kontinuierlicher Typ,Masu,Mashi,Mashi
Hilfsverb,*,*,*,Besondere,Grundform,Ta,Ta,Ta
>>> 

Es war gut