[PYTHON] Comment démarrer automatiquement une VM préemptive GCP

Comment démarrer automatiquement une VM préemptive GCP

GCP dispose d'une VM appelée Preemptible VM qui s'arrête jusqu'à 24 heures au prix d'un prix modique. https://cloud.google.com/compute/docs/instances/preemptible?hl=ja

Les machines virtuelles qui sont arrêtées après avoir reçu la notification de préemption ne démarreront pas automatiquement. Voici une description des outils permettant le démarrage automatique à l'aide de scripts d'arrêt et de Cloud Functions.

Aperçu des outils

--Preemptible VM est un outil pour démarrer car il ne démarre pas automatiquement après l'arrêt.

• Il est conçu pour démarrer uniquement lorsque vous recevez une notification de préemption afin qu'il ne démarre pas si vous l'arrêtez manuellement.
• L'environnement d'exécution est python3.7.

Comportement de l'outil

1. Définissez shutdown-script sur la VM. Il est exécuté lorsque la machine virtuelle est arrêtée, vérifie si elle a reçu la notification de préemption, écrit TRUE ou FALSE dans un fichier et la télécharge sur GCS.
2. Exécutez Cloud Functions déclenchées par une mise à jour de fichier GCS.
3. La fonction ne démarrera la VM que si la notification de préemption est VRAI.

Etapes de configuration

1. Téléchargez le code source

   git clone [email protected]:cloud-mainte/auto-boot-preemtible-vm.git
   
   or 
   
   git clone https://gitlab.com/cloud-mainte/auto-boot-preemtible-vm.git
   

2. Créez un bucket GCS --Créez un compartiment pour placer le script d'arrêt et placer le script d'arrêt.

• Réécrivez la variable BUCKET dans le script comme il convient.

  $ gsutil mb -l ASIA-NORTHEAST1 gs://<backet name>
  $ gsutil cp shutdown-script.sh gs://<backet name>/
  $ gsutil ls -l gs://<backet name>
  

--Créez un compartiment pour stocker l'état de la réception ou non d'une notification de préemption.

```
$ gsutil mb -l ASIA-NORTHEAST1 gs://<backet name>
```

3. Définissez shutdown-script sur l'instance cible

   gcloud compute instances add-metadata <instance name> \
       --metadata shutdown-script-url=gs://<backet name>/shutdown-script.sh
   

4. Définissez le lanceur d'instance dans Cloud Functions

• Réécrivez bucket dans main.py selon le cas.

  gcloud functions deploy boot_preemptible_instance --region=asia-northeast1 -- 
  entry-point boot_instance --runtime python37 --trigger-event 
  google.storage.object.finalize --trigger-resource gs://<backet name>
  

Contrôle de fonctionnement

1. Essayez d'arrêter l'instance manuellement.

$ gcloud compute instances stop $ gcloud compute instances list $ gsutil cat gs:///preempted_status.out {"preempted_status":"FALSE", "instance_name":"", "zone":"asia-northeast1-a", "project":""} ```

S'il est arrêté manuellement, il sera "" preempted_status ":" FALSE "`.
Vérifiez le journal.

```
$ gcloud logging read "resource.type=\"cloud_function\" AND resource.labels.function_name=\"boot_preemptible_instance\" AND resource.labels.region=\"asia-northeast1\"" --format="table(timestamp, textPayload)" |head -10
TIMESTAMP                       TEXT_PAYLOAD
2020-08-11T04:38:26.982711475Z  Function execution took 1894 ms, finished with status: 'ok'
2020-08-11T04:38:26.979Z        Preempted status is FALSE.
 :
2020-08-11T04:38:25.090798409Z  Function execution started
```

2. Essayez d'imiter la notification Preempt.

$ cat preempted_status.out
{"preempted_status":"TRUE", "instance_name":"<instance name>", "zone":"asia-northeast1-a", "project":"<project name>"}
$ gsutil cp preempted_status.out gs://<backet name>/
$ gsutil cat gs://<backet name>/preempted_status.out
{"preempted_status":"TRUE", "instance_name":"<instance name>", "zone":"asia-northeast1-a", "project":"<project name>"}

Vérifiez le journal.

$ gcloud logging read "resource.type=\"cloud_function\" AND resource.labels.function_name=\"boot_preemptible_instance\" AND resource.labels.region=\"asia-northeast1\"" --format="table(timestamp, textPayload)" |head -12
TIMESTAMP                       TEXT_PAYLOAD
2020-08-11T05:02:51.640069088Z  Function execution took 15066 ms, finished with status: 'ok'
2020-08-11T05:02:51.637Z        Instance started.
2020-08-11T05:02:51.637Z        Instance starting.. status = RUNNING
2020-08-11T05:02:46.246Z        Instance starting.. status = STAGING
2020-08-11T05:02:40.862Z        Instance starting.. status = TERMINATED
2020-08-11T05:02:39.373Z        Instance status is now TERMINATED
2020-08-11T05:02:38.959Z        Preempted status is TRUE. Boot up the instance.
 :
2020-08-11T05:02:36.577339221Z  Function execution started

L'instance a démarré.

$ gcloud compute instances list
NAME                         ZONE               MACHINE_TYPE   PREEMPTIBLE  INTERNAL_IP     EXTERNAL_IP    STATUS
<instance name>  asia-northeast1-a  g1-small       true         XX.XX.XX.XX   XX.XX.XX.XXX  RUNNING