[PYTHON] Vorverarbeitung beim maschinellen Lernen 1 Datenanalyseprozess

Aidemy 2020/10/29

Einführung

Hallo, es ist ja! Ich bin eine knusprige Literaturschule, aber ich war an den Möglichkeiten der KI interessiert, also ging ich zur AI-spezialisierten Schule "Aidemy", um zu studieren. Ich möchte das hier gewonnene Wissen mit Ihnen teilen und habe es in Qiita zusammengefasst. Ich freue mich sehr, dass viele Menschen den vorherigen zusammenfassenden Artikel gelesen haben. Vielen Dank! Dies ist der erste Beitrag zur Vorverarbeitung für maschinelles Lernen. Freut mich, dich kennenzulernen.

Was diesmal zu lernen ・ Datenfluss

Datenanalysefluss

-Diese Prozesse sind jedoch nicht unbedingt einseitig und können bei Bedarf zurückgegeben werden. ・ Die Vorverarbeitung der diesmal gelernten Daten entspricht (2) und (3) dieses Prozesses.

・ Abbildung![Screenshot 2020-10-29 14.36.04.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/698700/d949cd2a-4ff7-833e- d8b1-df799dcf7741.png)

KDD -__ KDD__ hat den folgenden Prozess. ① __ Datenerfassung __: Erfassen Sie Daten, indem Sie Probleme und Ziele festlegen. ② __Datenauswahl __: Wählen Sie aus den erfassten Daten die Daten aus, die für die Analyse (Data Mining) verwendet werden sollen. ③ __Datenbereinigung __: Führt eine Datenbereinigung durch, z. B. das Löschen fehlender Werte und Ausreißer. ④ __Datenkonvertierung __: Konvertiert das bereinigte Datenformat in ein Format, das für das Data Mining verwendet werden kann. ⑤ __Data Mining __: Führt Analysen und Lernvorgänge durch, indem Regression und Klassifizierung der konvertierten Daten durchgeführt werden. ⑥ __ Interpretation / Bewertung __: Interpretieren und bewerten Sie das Muster anhand der Ergebnisse des Data Mining.

・ Abbildung![Screenshot 2020-10-29 14.36.19.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/698700/78ad3832-30bf-33c2- 4788-44865de4cc74.png)

Diese Zeit ist vorbei. Vielen Dank für das Lesen bis zum Ende.

Recommended Posts

Vorverarbeitung beim maschinellen Lernen 1 Datenanalyseprozess
Vorverarbeitung beim maschinellen Lernen 2 Datenerfassung
Vorverarbeitung beim maschinellen Lernen 4 Datenkonvertierung
Python: Vorverarbeitung beim maschinellen Lernen: Datenerfassung
Python: Vorverarbeitung beim maschinellen Lernen: Datenkonvertierung
Maschinelles Lernen in Delemas (Datenerfassung)
Python: Vorverarbeitung beim maschinellen Lernen: Übersicht
Vorverarbeitung beim maschinellen Lernen 3 Fehlende Wert- / Ausreißer- / Ungleichgewichtsdaten
[Python] Erste Datenanalyse / maschinelles Lernen (Kaggle)
Datenversorgungstricks mit deque beim maschinellen Lernen
Ich habe mit der maschinellen Vorverarbeitung von Python Data begonnen
Geschichte rund um die Datenanalyse durch maschinelles Lernen
Python: Vorverarbeitung beim maschinellen Lernen: Umgang mit fehlenden / Ausreißern / unausgeglichenen Daten
Datensatz für maschinelles Lernen
Japanische Vorverarbeitung für maschinelles Lernen
Maschinelles Lernen in Delemas (Praxis)
Informationen zur Datenvorverarbeitung von Systemen, die maschinelles Lernen verwenden
Lernnotizen zur Python-Datenanalyse
Wird in EDA für maschinelles Lernen verwendet
Leistungsüberprüfung der Datenvorverarbeitung für maschinelles Lernen (numerische Daten) (Teil 2)
Coursera-Herausforderungen für maschinelles Lernen in Python: ex7-2 (Primäranalyse)
Leistungsüberprüfung der Datenvorverarbeitung für maschinelles Lernen (numerische Daten) (Teil 1)
Python: Zeitreihenanalyse: Vorverarbeitung von Zeitreihendaten
Automatisieren Sie Routineaufgaben beim maschinellen Lernen
Algorithmus für maschinelles Lernen (multiple Regressionsanalyse)
Algorithmus für maschinelles Lernen (Einzelregressionsanalyse)
Klassifikation und Regression beim maschinellen Lernen
Vorverarbeitungsvorlage für die Datenanalyse (Python)
Zeitreihenanalyse 3 Vorverarbeitung von Zeitreihendaten
Random Seed Research im maschinellen Lernen
Maschinelles Lernen: Überwacht - Lineare Diskriminanzanalyse
Grundlegendes maschinelles Lernverfahren: ② Daten vorbereiten
Sammeln von Daten zum maschinellen Lernen
Führen Sie eine morphologische Analyse in der von GCE gestarteten maschinellen Lernumgebung durch
Maschinelles Lernen
Unausgeglichenes Datenlernen mit maschinellem Lernen k-NN
Maschinelles Lernen mit Python (2) Einfache Regressionsanalyse
[Python] Techniken, die häufig beim maschinellen Lernen verwendet werden
Windähnliche Dummy-Datengenerierung im Markov-Prozess
<Kurs> Maschinelles Lernen Kapitel 4: Hauptkomponentenanalyse
Datenanalyse beginnend mit Python (Datenvorverarbeitung - maschinelles Lernen)
[Maschinelles Lernen] Regressionsanalyse mit Scicit Learn
[Ver1.3.1 Update] Ich habe DataLiner erstellt, eine Datenvorverarbeitungsbibliothek für maschinelles Lernen.
Datenanalyse Titanic 2
Datenanalyse Python
Python 3 Engineer Zertifizierungsdatenanalyse Prüfung Pre-Exam Learning
Vollständige Offenlegung der beim maschinellen Lernen verwendeten Methoden
Datenanalyse Titanic 1
Datenanalyse in Python: Ein Hinweis zu line_profiler
Maschinelles Lernen Aufteilung der Trainingsdaten und Lernen / Vorhersage / Verifizierung
Zusammenfassung der beim maschinellen Lernen verwendeten Bewertungsfunktionen
Ich habe versucht, das Bild zu verarbeiten und zu transformieren und die Daten für maschinelles Lernen zu erweitern
Analyse der gemeinsamen Raumnutzung durch maschinelles Lernen
[Memo] Maschinelles Lernen
Lassen Sie uns einen Teil des maschinellen Lernens mit Python berühren
Datenanalyse Titanic 3
Klassifikation des maschinellen Lernens
Vorhersage kurzlebiger Arbeiten von Weekly Shonen Jump durch maschinelles Lernen (Teil 1: Datenanalyse)
Aufgezeichnete Umgebung für die Datenanalyse mit Python
[Für Anfänger] Einführung in die Vektorisierung beim maschinellen Lernen