[PYTHON] Empfehlung von Jupyter Notebook, einer Codierungsumgebung für Datenwissenschaftler

Data Scientist Artikel 2. ww

Datenanalyseumgebung für Datenwissenschaftler

Ich denke, dass Datenwissenschaftler viele Möglichkeiten haben, Präsentationen zu halten und zu diskutieren, während sie sich die Daten ansehen. <- Angemessene Spekulation Daher bin ich der Meinung, dass eine andere Codierungsumgebung als vim / emacs und die alte IDE erforderlich ist.

Ich denke, die folgenden vier Punkte sind erforderliche Spezifikationen.

Es ist eine willkürliche Tabelle, die weit von der Datenwissenschaft entfernt ist, aber es stimmt, dass die Verwendung von Jupyter Notebook keine Verluste verursacht. RStudio (Python ist Spyder) ist gut, aber unter dem Gesichtspunkt der Reproduzierbarkeit ist Jupyter Notebook, mit dem Sie Kommentare mit Abschriften hinterlassen können, besser. Es wird empfohlen, da Sie den Codierungsprozess auch dann speichern können, wenn Sie kein Datenwissenschaftler sind.

Was ist Jupyter Notebook?

――Python wird von Anfang an mit einer interaktiven Shell geliefert, aber Personen, die damit nicht zufrieden waren, haben eine interaktive Shell namens IPython (Interactive Python) erstellt.

• Auszug aus Verwendung von IPython

--Zellenorientierte Codierung: Kann gemeinsam in Einheiten ausgeführt werden, die als Zellen bezeichnet werden --Tab Vervollständigung reservierter Wörter, Variablen, Modulnamen usw.

• Objekte untersuchen: Zum Objektnamen hinzufügen, um weitere Informationen zu erhalten
• Verschiedene magische Befehle: Überprüfen Sie die Ausführungsgeschwindigkeit mit %% timeit usw. --Shell-Befehle: Zeilen, die mit! Beginnen, wie z. B. ! Ls, können als Shell-Befehle ausgeführt werden
• Wiederverwendung von Ein- und Ausgängen: Zelleneingänge und -ausgänge werden in Variablen namens In und Out gespeichert

• Im IPython-Projekt wurde ein IPython-Notizbuch angezeigt, das IPython über das Web eingeben und ausgeben kann.
• Pandas-Tabellen, Matplotlib-Diagramme, Mathjax-Formeln usw. können mithilfe von Webfunktionen angezeigt werden.
• Anzeige von Kommentaren im Markdown: Die Beschreibungskraft hat sich sofort verbessert
• Sie können den Analyseprozess im IPynb-Format speichern und freigeben.
• Wenn Sie es auf Github stellen, können Sie es in Form eines Ipython-Notizbuchs von nbviewer anzeigen.
• Benutzer anderer Sprachen, die sich das IPython-Notizbuch angesehen haben, haben begonnen, das IPython-Notizbuch anzuschließen, damit es auch in anderen Sprachen funktioniert.
• Die Basis ist eine auf Nullq basierende Kommunikation, die als Kernel bezeichnet wird. --Dieser Kernel wurde in jeder Sprache erstellt
• Julia, Ruby, R usw.
• In einer Situation, in der der Name IPython Notebook seltsam ist?
• Aus dem IPython-Projekt hervorgegangen und zu einem unabhängigen Projekt namens Jupyter geworden.
  • IPython Notebook 4.0 => Jupyter Notebook (JuPyteR: Julia + Python + R)
• So sind Jupyter Notebook und IPython Notebook gleich
• Die in IPython entwickelte Konsolenversion qtconsole wurde ebenfalls auf Jupyter verschoben.

als Ergebnis,

• In verschiedenen Sprachen
• Einfach zu codieren --Die kraftvolle Ausdruckskraft des Abschlags und
• Hat eine interaktive Datenvisualisierungsumgebung über das Web
• Eingebetteter Code erleichtert das erneute Testen.

** Es handelt sich um eine Anwendung, die Reproduzierbarkeit, Speicherung und gemeinsame Nutzung des Analyseprozesses ermöglicht **. Es ist eine Art elektronische Versuchsnotiz. (Es gibt keinen Zeugen)

Umgebung

Wenn Sie Anakonda setzen, ist alles enthalten. Die Umgebungskonstruktion von Anaconda finden Sie unter hier.

Starten Sie das Terminal in einem geeigneten Ordner und drücken Sie den folgenden Befehl. jupyter notebook Es ist in Ordnung, wenn der Browser gestartet wird und die Jupyter-Seite unter "http: // localhost: 8888" angezeigt wird.

Jupyter Grundeinstellungen

Alter Artikel Integration

Es funktioniert vorerst auch dann, wenn Sie es nicht einstellen. Wenn es Ihnen nichts ausmacht, überspringen Sie es bitte.

alias jupyter notebook ist ziemlich lang, so dass Sie note oder alias machen können.

Über config

Es scheint, dass sich der Konfigurationsbereich in Jupyter 4.0 erheblich geändert hat, daher sollten diejenigen, die ihn schon lange verwenden, ihn überprüfen. https://jupyter.readthedocs.org/en/latest/migrating.html

Erstellen einer Konfigurationsdatei und Festlegen eines Kennworts

Referenz-URL

jupyter notebook --generate-config
#>>> Writing default config to: ~/.jupyter/jupyter_notebook_config.py
python -c "from notebook.auth import passwd;print(passwd())" 
#>>> Enter password:
#>>> Verify password:
#>>> 'sha1:........'

Erstellen Sie eine Kopie des Hash-Passworts, das mit sha1: ... beginnt.

vi ~/.jupyter/jupyter_notebook_config.py

Hauptänderungen

Suchen Sie die folgenden Parameter und kommentieren Sie sie gegebenenfalls aus.

Es gibt auch andere SSL-Einstellungen. Überprüfen Sie daher die Dokumentation, wenn Sie im Web veröffentlichen müssen.

Bibliothek, die beim Start von IPython geladen werden soll

Wenn Sie die Bibliothek beschreiben, die zuerst in ~ / .ipython / profile_default / startup geladen werden soll, wird sie beim Start des Kernels zusammen gelesen. Zellmagie kann auch im ipy-Format beschrieben werden, daher ist es gut, auch% matplotlin inline zu beschreiben. Wenn Sie [die Lieblingsschreibweise von seaborn] schreiben (http://nkmk.github.io/blog/python-seaborn-matplotlib/), wird es danach einfacher. Wenn Sie zu viel schreiben, wird der Start des Kernels verzögert, was frustrierend ist. (Pandas sind relativ schwer)

Beispiel:

00_init.ipy

%matplotlib inline
from matplotlib import pyplot as plt
import seaborn as sns
import numpy as np
import pandas as pd

extension Jupyter Notebookn hat auch eine Erweiterung. Ich werde es weglassen, weil es im folgenden Artikel zusammengefasst ist. Fügen Sie eine Erweiterung hinzu, um eine komfortablere Jupyter-Umgebung zu erstellen [jupyter notebook extensions python-markdown(markdown + jinja2)] (http://qiita.com/ksomemo/items/ba0f24daae2276ffd9b2)

RISE

Es gibt eine coole Erweiterung, mit der Sie auf Ihrem Jupyter-Notebook präsentieren können.

git clone https://github.com/damianavila/RISE
cd RISE
python setup.py install

Oben rechts auf der Notebook-Seite wird eine Diashow-Schaltfläche hinzugefügt

Jupyter Content Management Extensions

pip install jupyter_cms
jupyter cms install --user -s 
jupyter cms activate
jupyter notebook

(3/21 Nachschrift) Ich habe vergessen, dass IBM eine super bequeme Erweiterung gemacht hat. Wenn Sie dies eingeben, können Sie von jupyter aus eine Volltextsuche in der Notizbuchdatei durchführen. IBM Einführungsblog Es wird auf pip veröffentlicht und ist daher einfach zu installieren. Wenn Sie das Notizbuch nach der Aktivierung von "jupyter cms" starten, wird dem Baumbildschirm eine Suchschaltfläche hinzugefügt. Sie können auch nach untergeordneten Codes und Kommentaren suchen, wodurch die Wiederverwendbarkeit verbessert wird. Die Suche ist auch sehr flexibel (http://whoosh.readthedocs.org/en/latest/querylang.html). (Ich würde mich mehr freuen, wenn es eine Vorschau gäbe ...)

Darüber hinaus gibt es auch Erweiterungen, mit denen Sie Dashboards mit Jupyter Notebook erstellen können. JupyterDay NYC Folie github

(3/21 Nachtrag bisher)

So verwenden Sie Jupyter Notebook

Es gibt einen guten Artikel. Jupyter Beginning

(Hinzugefügt am 13. April 2016) Geben Sie jupyter_environment_kernels ein, um die Umgebung zu wechseln. Ich habe es in einem wunderbaren Artikel [hier] herausgefunden (http://qiita.com/yoppe/items/38005f415a5b8b884c7d).