La piattaforma di simulazione della telemetria cloud richiede di eseguire il deployment dell'infrastruttura nel tuo progetto Google Cloud.
Accedere al codice sorgente
Il codice sorgente della piattaforma di simulazione della telemetria cloud è ospitato su GitHub, in aaos-sdv-telemetry-simulator.
Prerequisiti
Per eseguire il deployment della piattaforma, assicurati di soddisfare i seguenti prerequisiti:
- Un progetto Google Cloud con la fatturazione abilitata.
- Sicurezza della demo web: se implementi la demo web, devi configurare un ID client OAuth 2.0 in Google Cloud API e servizi > Credenziali per proteggere l'applicazione App Engine e limitare l'accesso agli account Google autorizzati.
- Artefatti di build del veicolo definito dal software (SDV): devi disporre dei tuoi
artefatti di immagine SDV compilati. Questi non sono forniti in questo repository.
cvd-host_package.tar.gzsdv_core_cf-img-<version>.zip
- Autorizzazioni:l'utente o il service account che esegue Terraform deve disporre di autorizzazioni sufficienti per creare le risorse definite nella configurazione (ad esempio, Editor progetto o un ruolo personalizzato con autorizzazioni per Compute Engine, Cloud Functions, Identity and Access Management, Cloud Storage e altri servizi necessari).
- Strumenti:
- Google Cloud CLI (
gcloud CLI) - Terraform (versione utilizzata nel repository)
- Docker
- Vai (versione utilizzata per le funzioni dell'orchestratore nel repository)
- Google Cloud CLI (
Esegui il deployment dell'infrastruttura Google Cloud
Il deployment della piattaforma di simulazione prevede due passaggi principali: utilizzare Terraform per eseguire il deployment dell'infrastruttura di base su Google Cloud e creare ed eseguire il push dell'immagine Docker dell'agente di simulazione su Artifact Registry. Questa sezione ti guida nel deployment dell'infrastruttura.
Inserisci i valori delle seguenti variabili per aggiornare gli snippet di codice in questa pagina:
Configura il backend Terraform:crea un file per specificare dove Terraform archivia il file di stato in Cloud Storage. Assegna un nome al file utilizzando questa sintassi:
environments/ENVIRONMENT/backend.hcl# environments/ENVIRONMENT/backend.hcl bucket = "TF_BUCKET_NAME" prefix = "sdv-telemetry-simulation"Configura le variabili del progetto:crea un file denominato con i dettagli del tuo progetto. Assegna un nome al file utilizzando questa sintassi:
environments/ENVIRONMENT/variables.tfvars# environments/ENVIRONMENT/variables.tfvars project_id = "PROJECT_ID" default_region = "REGION" default_zone = "ZONE" agent_docker_image = "REGION-docker.pkg.dev/PROJECT_ID/sim-agents/simulation-agent" # Security: Map logical tags to SHA256 digests # Security: Map logical tags to SHA256 digests (optional) image_fingerprints = { "latest" = "sha256:e3b0c44298fc1c149afbf4c8996fb92427ae41e4649b934ca495991b7852b855", "stable" = "sha256:88d4266fd4e6338d13b845fcf289579d209c897823b9217da3e161936f031589" } # Parallel Execution Limit (Default: 5) max_concurrent_simulations = 5Applica la configurazione Terraform: vai alla directory
infrastructure, quindi inizializza e applica la configurazione:# Initialize Terraform with your backend configuration terraform init -backend-config=environments/ENVIRONMENT/backend.hcl # (Optional) Preview the changes terraform plan --var-file=environments/ENVIRONMENT/variables.tfvars # Apply the changes to deploy the infrastructure terraform apply --var-file=environments/ENVIRONMENT/variables.tfvars
Crea ed esegui il push dell'immagine dell'agente di simulazione
L'agente di simulazione esegue la simulazione sulla macchina virtuale (VM) Compute Engine. Lo crei con gli artefatti SDV ed esegui il push su Artifact Registry.
Per creare ed eseguire il push dell'immagine dell'agente di simulazione:
Inserisci artefatti: copia i file
cvd-host_package.tar.gzesdv_core_cf-img-<version>.zipnella directorysimulation-agent/sdv-image-resources/.Crea ed esegui il push: vai alla directory
simulation-agent, quindi crea ed esegui il push dell'immagine. Sostituisci il percorso dell'immagine con quello configurato nel filevariables.tfvars.# Example using the path from the .tfvars example above export AGENT_IMAGE="REGION-docker.pkg.dev/PROJECT_ID/sim-agents/simulation-agent:latest" # Build the image docker build -t $AGENT_IMAGE . # Push the image to Artifact Registry docker push $AGENT_IMAGEAggiorna le impronte:dopo aver eseguito il push di una nuova immagine, potresti dover ottenere il relativo digest SHA256 e aggiornare la mappa
image_fingerprintsnel filevariables.tfvars, quindi eseguire di nuovoterraform apply.# Get the digest using gcloud gcloud container images describe $AGENT_IMAGE --format="value(image_summary.digest)"La tua piattaforma di simulazione di telemetria cloud è stata implementata ed è pronta ad accettare richieste di simulazione.
Operazioni e risoluzione dei problemi
Questa soluzione ti consente di utilizzare gli strumenti integrati di Google Cloud per l'osservabilità. Consuma risorse di calcolo solo per richiesta e durante l'esecuzione della simulazione.
Gestione dei costi
L'architettura è progettata per essere conveniente utilizzando risorse serverless ed effimere. I costi sono principalmente determinati da:
- Compute Engine:fatturazione per il tempo di esecuzione delle VM di simulazione. L'utilizzo delle VM spot può ridurre significativamente questo costo.
- Cloud Functions:fatturazione per chiamata.
- Cloud Storage:fatturazione per l'archiviazione di file di input e output e log.
- Firestore: fatturazione per letture, scritture e archiviazione dei dati.
Osservabilità
Tutti i componenti sono integrati con la suite operativa Google Cloud.
- Esplora log:questo è lo strumento principale per la risoluzione dei problemi. Puoi
filtrare i log per risorsa:
- Cloud Functions:controlla i log delle funzioni
receive-requestoschedule-simulationper eseguire il debug dei problemi di orchestrazione. - Compute Engine:controlla i log delle istanze VM per problemi di avvio o arresto.
- Agente di simulazione:l'agente in esecuzione all'interno del container Docker inoltra i suoi log a Esplora log. Filtra per nome dell'istanza VM per visualizzare l'avanzamento dettagliato della simulazione.
- Cloud Functions:controlla i log delle funzioni
- Cloud Storage:per le simulazioni completate, i file
logcatebugreportdel dispositivo Cuttlefish vengono caricati nella directory di output della simulazione nel bucket Cloud Storage, fornendo informazioni dettagliate sul comportamento dell'ambiente Android.
Service account
Terraform crea diversi service account per attivare un ambiente sicuro con privilegi minimi. I service account chiavi includono:
Identità di esecuzione (VM):
simulation-agent:- Collegato a:le VM di Compute Engine che eseguono la simulazione.
- Ruolo:consente alla VM di caricare i risultati e segnalare il completamento.
- Autorizzazioni:
roles/storage.objectUser: legge gli input e carica gli artefatti (log, report) in Cloud Storage.roles/run.invoker: esegue l'autenticazione e richiama la funzionefinish-simulation.
Identità di orchestrazione (funzioni):
read-simulations-function:- Allegato a:la funzione Cloud
read-simulation. - Autorizzazioni:
roles/datastore.user: Legge i record di simulazione e VM in esecuzione in Firestore.
- Allegato a:la funzione Cloud
receive-request-function:- Allegato a:la funzione Cloud
receive-request. - Autorizzazioni:
roles/datastore.user: crea nuovi record di simulazionePENDINGin Firestore.roles/storage.objectUser: verifica l'esistenza dei file di input in Cloud Storage.
- Allegato a:la funzione Cloud
scheduler-function:- Allegato a:la funzione Cloud
schedule-simulation. Autorizzazioni:
- `roles/pubsub.subscriber`: Pulls messages from the simulation queue. - `roles/datastore.user`: Performs atomic reads and writes to the `running-vms` counter. - `roles/compute.instanceAdmin.v1`: Creates and starts Compute Engine VMs. - `roles/iam.serviceAccountUser`: This permission allows this function to assign the `simulation-agent` service account to the VMs it creates.
- Allegato a:la funzione Cloud
simulation-finisher-function:- Allegato a:la funzione Cloud
finish-simulation. - Autorizzazioni:
-
roles/compute.instanceAdmin.v1: elimina la VM al termine dell'esecuzione. -roles/datastore.user: aggiorna lo stato della simulazione aCOMPLETEDoFAILED.
- Allegato a:la funzione Cloud
delete-simulation-function:- Allegato a:la funzione Cloud
delete-simulation. - Autorizzazioni:
-
roles/compute.instanceAdmin.v1: elimina forzatamente le macchine virtuali durante l'annullamento. -roles/datastore.user: aggiorna lo stato dei lavori annullati.
- Allegato a:la funzione Cloud
Identità trigger:
scheduler-trigger:- Utilizzato da: trigger Eventarc (eventi) e Cloud Scheduler.
- Autorizzazioni:
roles/eventarc.eventReceivereroles/run.invokerper attivare le funzioni dell'orchestratore.
cleanup-scheduler:- Utilizzato da: il cron job Cloud Scheduler per la pulizia.
- Autorizzazioni:
roles/run.invokerper attivare la logica di pulizia.
La gestione dei criteri Identity and Access Management per questi service account è il modo principale per controllare l'accesso e le autorizzazioni all'interno del sistema.