[PYTHON] Automatisieren Sie den WEB-Prozess mit Heroku + Selen + Chrome

Automatisieren Sie den WEB-Prozess mit Heroku + Selen + Chrome

• [WEB-Prozess mit Heroku + Selen + Chrom automatisieren](# Heroku - Selen - Chrom% e3% 81% a7web% e3% 83% 97% e3% 83% ad% e3% 82% bb% e3% 82% b9% e3% 82% 92% e8% 87% aa% e5% 8b% 95% e5% 8c% 96% e3% 81% 99% e3% 82% 8b)
• [Einleitung](#% e3% 81% af% e3% 81% 98% e3% 82% 81% e3% 81% ab)
• [Zweck](#% e7% 9b% ae% e7% 9a% 84)
• [In Verbindung stehender Artikel](#% e9% 96% a2% e9% 80% a3% e3% 81% 99% e3% 82% 8b% e8% a8% 98% e4% ba% 8b)
• [Ausführungsumgebung](#% e5% ae% 9f% e8% a1% 8c% e7% 92% b0% e5% a2% 83)
• [Quellcode](#% e3% 82% bd% e3% 83% bc% e3% 82% b9% e3% 82% b3% e3% 83% bc% e3% 83% 89)
• [Szenario und Voraussetzungen](#% e3% 82% b7% e3% 83% 8a% e3% 83% aa% e3% 82% aa% e3% 81% a8% e5% 89% 8d% e6% 8f% 90% e6% 9d% a1% e4% bb% b6)
• [Automatischen Prozess erstellen](#% e8% 87% aa% e5% 8b% 95% e3% 83% 97% e3% 83% ad% e3% 82% bb% e3% 82% b9% e3% 81% ae% e4% bd% 9c% e6% 88% 90)
• [Python-API-Konfiguration](# python-api% e6% a7% 8b% e6% 88% 90)
• [API-Hauptrahmen](# api% e3% 83% a1% e3% 82% a4% e3% 83% b3% e3% 83% 95% e3% 83% ac% e3% 83% bc% e3% 83% a0)
• [FX-Rate abrufen](# fx% e3% 83% ac% e3% 83% bc% e3% 83% 88% e5% 8f% 96% e5% be% 97)
• [Heroku-Einstellungen](# heroku% e3% 81% ae% e8% a8% ad% e5% ae% 9a)
• [Chrome- und Treibereinstellungen](# chrome% e3% 81% a8driver% e3% 81% ae% e8% a8% ad% e5% ae% 9a)
• [Einstellungen für die Treiberversion](# Treiber% e3% 83% 90% e3% 83% bc% e3% 82% b8% e3% 83% a7% e3% 83% b3% e3% 81% ae% e8% a8 % ad% e5% ae% 9a)

Einführung

Dies ist ein Artikel über die Mac-Umgebung, aber die Vorgehensweise ist für die Windows-Umgebung dieselbe. Bitte lesen und probieren Sie den umweltabhängigen Teil.

Zweck

Nachdem Sie diesen Artikel bis zum Ende gelesen haben, können Sie:

• Automatisieren Sie den WEB-Prozess mit Selenium und Chrome Driver
• Stellen Sie Chrome und Treiber in Heroku ein

Webprozessautomatisierung

Erhalten und anzeigen Sie ** USD / JPY ** aus dem FX-Chart-Kurs von Yahoo! Finance.

Manuell über den Browser anzeigen	Automatisch erfasste Daten anzeigen

Zum Thema passende Artikel

• Selenium
• heroku-buildpack-chromedriver.git
• heroku-buildpack-google-chrome.git

Ausführungsumgebung

Quellcode

Ich denke, dass Sie Ihr Verständnis vertiefen können, indem Sie den Implementierungsinhalten und dem Quellcode tatsächlich folgen. Bitte benutzen Sie es auf jeden Fall.

GitHub

Szenarien und Voraussetzungen

1. Erhalten Sie ** USD / JPY ** aus dem FX-Chart-Kurs von Yahoo! Finance und zeigen Sie ihn an.
2. Es soll in MySQL oder PostgreSQL gespeichert werden, aber DB-bezogene Elemente sind für die Erläuterung der Automatisierung nicht zulässig.
3. Das API-Framework übernimmt Flask.

Automatisierten Prozess erstellen

Python-API-Konfiguration

tree.sh

python-Selenium
  ├── fx_rate
  │   ├── __init__.py
  │   └── utility.py
  └── main.py

API-Hauptrahmen

main.py

import datetime
import logging
import os

from flask import Flask

from fx_rate.utility import get_fx_rate

logging.basicConfig(level=logging.INFO)
logger = logging.getLogger(__name__)

app = Flask(__name__)


@app.route('/fx-rate', methods=['GET'])
def get():
    usd_jpy = get_fx_rate()
    res = 'timestamp={}, USDJPY={}'.format(
        datetime.datetime.utcnow() + datetime.timedelta(hours=9), usd_jpy)
    logger.info(res)
    return res, 200


if __name__ == '__main__':
    host = os.getenv('HOST', '0.0.0.0')
    port = int(os.getenv('PORT', 5000))
    app.run(host=host, port=port, debug=True)

Holen Sie sich FX Rate

utility.py

import datetime

from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.common.by import By


def get_fx_rate():
    options = Options()
    options.add_argument('--headless')
    driver = webdriver.Chrome(options=options)
    driver.get('https://info.finance.yahoo.co.jp/fx/')
    usd_jpy = driver.find_element(By.ID, 'USDJPY_top_bid').text
    driver.quit()
    return usd_jpy


if __name__ == '__main__':
    usd_jpy = get_fx_rate()
    print('timestamp={}, USDJPY={}'.format(datetime.datetime.utcnow() +
                                           datetime.timedelta(hours=9), usd_jpy))

Heroku-Einstellungen

Chrome- und Treibereinstellungen

Fügen Sie Folgendes unter ** Buildpack hinzufügen ** im Abschnitt Einstellungen> Buildpacks hinzu.

`Wenn Sie auf Heroku bereitstellen, wird es automatisch installiert. Bitte melden Sie sich im Voraus an. Wenn Sie bereits bereitgestellt haben oder erneut bereitstellen möchten, ohne den Quellcode zu ändern, versuchen Sie das leere Commit unten. ``

allow_empty.sh

~$ git commit --allow-empty -m "allow empty commit"
~$ git push heroku master

Einstellung der Treiberversion

Normalerweise ist keine Einstellung erforderlich. Wenn die Versionen von ** chromedrive ** und ** google-chrome ** unterschiedlich sind, z. B. wenn Chrome aktualisiert wird, müssen Sie die Version von ** chromedrive ** angeben.

1. Klicken Sie im Abschnitt Einstellungen> Konfigurations-Vars auf ** Konfigurations-Vars anzeigen **.
2. Geben Sie ** KEY ** und ** VALUE ** ein und klicken Sie auf ** Add **.