[Data Science-Grundlagen] Ich habe versucht, mit Python von CSV auf MySQL zu speichern

Es ist wichtig, die Daten der Datenwissenschaft in RDB festzulegen.

Übrigens das oben genannte

• [Python-Anfänger hat Data Science ausprobiert] Datenerfassung von API [Tag1]
• [Grundlagen der Datenwissenschaft] Sammeln von Daten aus RSS mit Python

Die Serie geht vorerst weiter. Ich plane, die Analyse mit den erfassten Daten auch in Zukunft fortzusetzen. (Pläne)

Dieses Mal werde ich tun, bis ich die Daten auf CSV in die Tabelle von MySQL gestellt habe.

Der Fluss ist üblich, weil Sie ihn einfach von csv nach db setzen --db gesetzt --parse csv

• Verbinden Sie sich mit MySQL --Hit SQL mit CSV-Zeilendaten Es fühlt sich an wie. Ich bin ein Anfänger von Python und ich genieße es normalerweise, mit Schienen abzufragen.

Stellen Sie Benutzer oder Datenbank ein, die diesmal für MySQL verwendet werden

Es ist normalerweise ein einfaches MySQL.

• create user
• create db
• create table Also werde ich dieses Mal ein Tabe machen, um CSV zu setzen. Wenn Sie dies nicht verstehen, lesen Sie diesen Artikel (Hinweise zu einer Reihe von Befehlen vom Beginn von MySQL bis zur Tabellenerstellung).

csv analysieren

import csv

Setzen Sie das CSV-Modul ein

with open('path/to/csvfile.csv') as csvfile:
  reader = csv.reader(csvfile)

In `csvfile```,` <open file'path / to / csvfile.csv ', mode'r' bei 0x1098da030> `` Objekt wird eingegeben und `csvfile``` befindet sich im Reader. Enthält ein Objekt, das die Zeile wiederholt (iteriert).

Return a reader object which will iterate over lines in the given csvfile. csvfile can be any object which supports the iterator protocol and returns a string each time its next() method is called — file objects and list objects are both suitable.

Von hier

Header überspringen

Ich wollte den Header nicht in die CSV-Datei aufnehmen, also habe ich den Header übersprungen.

  next(reader, None)

Die Erklärung von next () lautet hier.

next(iterarot[, default]) Retrieve the next item from the iterator by calling its next() method. If default is given, it is returned if the iterator is exhausted, otherwise StopIteration is raised.

Schauen Sie sich nacheinander jede Zeile an

  for row in reader:
		#Zeile für Zeile in db einfügen

Stellen Sie eine Verbindung zu MySQL her

import mysql.connector

Setzen Sie das Modul ein

dbcon = mysql.connector.connect(
  database=inifile.get("database", "db"),
  user=inifile.get("database", "user"),
  password=inifile.get("database", "password"),
  host=inifile.get("database", "host")
)
dbcur = dbcon.cursor()
dbcur.execute('INSERT INTO Tabellenname(col name, col name) VALUES(%s, "%s")' % ('v1', 'v2'))
dbcon.commit()

Geben Sie mit ein. Wenn Sie es in der Luft lesen, können Sie es verstehen (es war leider schwierig, das Verhalten der Methode jedes Moduls zu überprüfen). Es fühlt sich an, als würde SQL tatsächlich durch Commit ausgeführt. Einer der Gründe ist wahrscheinlich, dass es effizienter ist, SQL gleichzeitig zu drücken, wenn mehrere SQLs vorhanden sind oder wenn mehrere SQLs vorhanden sind und wenn Sie MySQLs mehrmals verbinden und sie dann einmal verbinden, anstatt sie zu wiederholen. (Spekulation)

Alle zusammen

So was. (Der Tabellenname und die Konfiguration gelten diesmal für meine Umgebung. Ändern Sie sie daher entsprechend.)

import mysql.connector
import csv
import ConfigParser

inifile = ConfigParser.ConfigParser()
inifile.read("config/database.ini")
dbcon = mysql.connector.connect(
  database=inifile.get("database", "db"),
  user=inifile.get("database", "user"),
  password=inifile.get("database", "password"),
  host=inifile.get("database", "host")
)
dbcur = dbcon.cursor()
with open('RCdata/chefmozaccepts.csv') as csvfile:
  reader = csv.reader(csvfile)
  next(reader, None)
  for row in reader:
    dbcur.execute('INSERT INTO restaurants_payments_methods (restaurant_id, payment_method) VALUES(%s, "%s")' % tuple(row))
dbcon.commit()

Ergänzung

Andere Dinge, die ich über Python nicht wusste.

Python hat einen eingebauten Typ, der als in () eingeschlossenes Taple bezeichnet wird.

Von hier Unterschied zwischen Tapple und Liste

just like lists. The differences between tuples and lists are, the tuples cannot be changed unlike lists and tuples use parentheses, whereas lists use square brackets.

Ich kannte Tapuru nicht.