[PYTHON] Automatisez le processus WEB avec Heroku + Selenium + Chrome

Automatisez le processus WEB avec Heroku + Selenium + Chrome

• [Automatiser le processus WEB avec Heroku + Selenium + Chrome](# heroku - sélénium - chrome% e3% 81% a7web% e3% 83% 97% e3% 83% ad% e3% 82% bb% e3% 82% b9% e3% 82% 92% e8% 87% aa% e5% 8b% 95% e5% 8c% 96% e3% 81% 99% e3% 82% 8b)
• [Introduction](#% e3% 81% af% e3% 81% 98% e3% 82% 81% e3% 81% ab)
• [Objectif](#% e7% 9b% ae% e7% 9a% 84)
• [Article connexe](#% e9% 96% a2% e9% 80% a3% e3% 81% 99% e3% 82% 8b% e8% a8% 98% e4% ba% 8b)
• [Environnement d'exécution](#% e5% ae% 9f% e8% a1% 8c% e7% 92% b0% e5% a2% 83)
• [Code source](#% e3% 82% bd% e3% 83% bc% e3% 82% b9% e3% 82% b3% e3% 83% bc% e3% 83% 89)
• [Scénario et prérequis](#% e3% 82% b7% e3% 83% 8a% e3% 83% aa% e3% 82% aa% e3% 81% a8% e5% 89% 8d% e6% 8f% 90% e6% 9d% a1% e4% bb% b6)
• [Créer un processus automatique](#% e8% 87% aa% e5% 8b% 95% e3% 83% 97% e3% 83% ad% e3% 82% bb% e3% 82% b9% e3% 81% ae% e4% bd% 9c% e6% 88% 90)
• [Configuration API Python](# python-api% e6% a7% 8b% e6% 88% 90)
• [Cadre principal de l'API](# api% e3% 83% a1% e3% 82% a4% e3% 83% b3% e3% 83% 95% e3% 83% ac% e3% 83% bc% e3% 83% a0)
• [Obtenir le taux de change](# fx% e3% 83% ac% e3% 83% bc% e3% 83% 88% e5% 8f% 96% e5% be% 97)
• [Paramètres Heroku](# heroku% e3% 81% ae% e8% a8% ad% e5% ae% 9a)
• [Paramètres Chrome et pilote](# chrome% e3% 81% a8driver% e3% 81% ae% e8% a8% ad% e5% ae% 9a)
• [Paramètres de version du pilote](# pilote% e3% 83% 90% e3% 83% bc% e3% 82% b8% e3% 83% a7% e3% 83% b3% e3% 81% ae% e8% a8 % ad% e5% ae% 9a)

introduction

Il s'agit d'un article sur l'environnement Mac, mais la procédure est la même pour l'environnement Windows. Veuillez lire et essayer la partie dépendant de l'environnement.

Objectif

Après avoir lu cet article jusqu'au bout, vous pourrez:

• Processus WEB automatisé à l'aide du pilote Selenium et Chrome
• Définir Chrome et le pilote dans Heroku

Automatisation des processus Web

Obtenez et affichez ** USD / JPY ** à partir du taux de change de Yahoo!

Afficher manuellement depuis le navigateur	Afficher les données acquises automatiquement

Articles Liés

• Selenium
• heroku-buildpack-chromedriver.git
• heroku-buildpack-google-chrome.git

Environnement d'exécution

Code source

Je pense que vous pouvez approfondir votre compréhension en suivant réellement le contenu de l'implémentation et le code source. Veuillez l'utiliser par tous les moyens.

GitHub

Scénarios et prérequis

1. Obtenez et affichez ** USD / JPY ** à partir du taux de change graphique de Yahoo! Finance.
2. Il est censé être sauvegardé dans MySQL ou PostgreSQL, mais les éléments liés à la base de données sont hors de portée pour expliquer l'automatisation.
3. Le framework API adopte Flask.

Créer un processus automatisé

Configuration de l'API Python

tree.sh

python-Selenium
  ├── fx_rate
  │   ├── __init__.py
  │   └── utility.py
  └── main.py

Cadre principal de l'API

main.py

import datetime
import logging
import os

from flask import Flask

from fx_rate.utility import get_fx_rate

logging.basicConfig(level=logging.INFO)
logger = logging.getLogger(__name__)

app = Flask(__name__)


@app.route('/fx-rate', methods=['GET'])
def get():
    usd_jpy = get_fx_rate()
    res = 'timestamp={}, USDJPY={}'.format(
        datetime.datetime.utcnow() + datetime.timedelta(hours=9), usd_jpy)
    logger.info(res)
    return res, 200


if __name__ == '__main__':
    host = os.getenv('HOST', '0.0.0.0')
    port = int(os.getenv('PORT', 5000))
    app.run(host=host, port=port, debug=True)

Obtenez le taux de change

utility.py

import datetime

from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.common.by import By


def get_fx_rate():
    options = Options()
    options.add_argument('--headless')
    driver = webdriver.Chrome(options=options)
    driver.get('https://info.finance.yahoo.co.jp/fx/')
    usd_jpy = driver.find_element(By.ID, 'USDJPY_top_bid').text
    driver.quit()
    return usd_jpy


if __name__ == '__main__':
    usd_jpy = get_fx_rate()
    print('timestamp={}, USDJPY={}'.format(datetime.datetime.utcnow() +
                                           datetime.timedelta(hours=9), usd_jpy))

Paramètres Heroku

Paramètres de Chrome et du pilote

Ajoutez ce qui suit à partir de ** Add buildpack ** dans la section Paramètres> Buildpacks.

`Si vous déployez sur Heroku, il sera installé automatiquement. Veuillez vous inscrire à l'avance. Si vous avez déjà déployé ou souhaitez redéployer sans modifier le code source, essayez la validation vide ci-dessous. ''

allow_empty.sh

~$ git commit --allow-empty -m "allow empty commit"
~$ git push heroku master

Paramètre de version du pilote

Normalement, aucun réglage n'est requis. Si les versions de ** chromedrive ** et ** google-chrome ** sont différentes, par exemple lors de la mise à niveau de Chrome, vous devez spécifier la version de ** chromedrive **.

1. Cliquez sur ** Reveal Config Vars ** dans la section Settings> Config Vars.
2. Saisissez ** KEY ** et ** VALUE **, puis cliquez sur ** Ajouter **.