Il 15 settembre 2026, tutte le versioni di Cloud Composer 1 e le versioni 2.0.x di Cloud Composer 2 raggiungeranno la fine del ciclo di vita pianificato. Non potrai utilizzare gli ambienti con queste versioni. Ti consigliamo di pianificare la migrazione a Cloud Composer 3. Le versioni 2.1.x e successive di Cloud Composer 2 sono ancora supportate e non sono interessate da questa modifica.

Questa pagina è stata tradotta dall'API Cloud Translation.

Pulizia del database Airflow

Cloud Composer 3 | Cloud Composer 2 | Cloud Composer 1

Questa pagina spiega come gestire il database Airflow nel tuo ambiente.

Pulizia automatica del database con una policy di conservazione del database

Puoi configurare la pulizia automatica del database per l'ambiente Cloud Composer 3 impostando un criterio di conservazione del database. Dopo aver configurato questo criterio, i record più vecchi di un determinato periodo vengono rimossi automaticamente dal database Airflow ogni giorno. Per ulteriori informazioni, vedi Configurare la policy di conservazione del database.

Procedure di pulizia obsolete

Prima che la norma di conservazione del database diventasse disponibile in Cloud Composer, consigliavamo un approccio diverso per automatizzare la pulizia del database tramite un DAG di pulizia del database. Questo approccio è obsoleto in Cloud Composer 3. Questo DAG esegue un lavoro ridondante e puoi ridurre il consumo di risorse rimuovendolo e sostituendolo con norme di conservazione del database.

Limiti per le dimensioni del database

Con il passare del tempo, il database Airflow del tuo ambiente memorizza sempre più dati. Questi dati includono informazioni e log relativi a esecuzioni, attività e altre operazioni di Airflow precedenti.

Se le dimensioni del database Airflow sono superiori a 20 GB, non puoi eseguire l'upgrade dell'ambiente a una versione successiva.
Se le dimensioni del database Airflow sono superiori a 20 GB, non è possibile creare snapshot.

Mantenere le prestazioni del database

I problemi di prestazioni del database Airflow possono causare problemi di esecuzione complessivi del DAG. Osserva le statistiche sull'utilizzo di CPU e memoria del database. Se l'utilizzo di CPU e memoria si avvicina ai limiti, il database è sovraccarico e richiede lo scaling. La quantità di risorse disponibili per il database Airflow è controllata dalla proprietà dimensione dell'ambiente. Per scalare il database, modifica le dimensioni dell'ambiente in un livello più grande. L'aumento delle dimensioni dell'ambiente comporta un aumento dei costi.
Se utilizzi il meccanismo XCom per trasferire i file, assicurati di utilizzarlo in conformità alle linee guida di Airflow. Il trasferimento di file di grandi dimensioni o di un numero elevato di file utilizzando XCom influisce sulle prestazioni del database Airflow e può causare errori durante il caricamento degli snapshot o l'upgrade dell'ambiente. Prendi in considerazione l'utilizzo di alternative come Cloud Storage per trasferire grandi volumi di dati.

Rimuovere le voci per i DAG inutilizzati

Puoi rimuovere le voci del database per i DAG inutilizzati rimuovendo i DAG dall'interfaccia utente di Airflow.