Metodologia di test delle prestazioni per AlloyDB Omni su una VM

Seleziona una versione della documentazione:

Questo documento descrive i suggerimenti per l'esecuzione di test delle prestazioni su AlloyDB Omni su una VM. Questo documento presuppone che tu abbia familiarità con PostgreSQL.

Quando esegui il benchmarking del rendimento, definisci cosa ti aspetti di imparare dal test prima di iniziare. Ad esempio:

  • Qual è il throughput massimo che il sistema può raggiungere?
  • Quanto tempo richiede una determinata query o un determinato workload?
  • Come cambiano le prestazioni con l'aumentare della quantità di dati?
  • Qual è il rendimento di due sistemi diversi?
  • Di quanto il motore colonnare riduce il tempo di risposta delle prestazioni delle mie query?
  • Quanto carico può gestire un database prima che io debba prendere in considerazione l'upgrade a una macchina più potente?

Comprendere gli obiettivi dello studio sul rendimento ti aiuta a capire quale benchmark eseguire, quale ambiente è richiesto e quali metriche devi raccogliere.

Ripetibilità

Per trarre conclusioni dai test delle prestazioni, i risultati dei test devono essere ripetibili. Se i risultati dei test presentano un'ampia variazione, sarà difficile valutare l'impatto delle modifiche apportate all'applicazione o alla configurazione del sistema. Eseguire i test più volte o per periodi di tempo più lunghi per fornire più dati può contribuire a ridurre l'entità della variazione.

Idealmente, i test delle prestazioni dovrebbero essere eseguiti su sistemi isolati da altri sistemi. L'esecuzione in un ambiente in cui i sistemi esterni possono influire sulle prestazioni dell'applicazione può portare a conclusioni errate. Spesso non è possibile ottenere un isolamento completo quando si esegue un ambiente cloud multi-tenant, quindi è normale riscontrare una maggiore variabilità nei risultati

Parte della ripetibilità consiste nel garantire che il workload di test rimanga lo stesso tra un'esecuzione e l'altra. Un certo grado di casualità nell'input di un test è accettabile, purché non causi un comportamento dell'applicazione significativamente diverso. Se l'input del client generato in modo casuale modifica la combinazione di letture e scritture da un'esecuzione all'altra, le prestazioni varieranno in modo significativo.

Dimensioni del database, memorizzazione nella cache e pattern di I/O

Assicurati che la quantità di dati con cui stai eseguendo i test sia rappresentativa della tua applicazione. L'esecuzione di test con una piccola quantità di dati quando hai centinaia di gigabyte o terabyte di dati probabilmente non fornirà una rappresentazione reale delle prestazioni della tua applicazione. Anche le dimensioni del set di dati influenzano le scelte effettuate da Query Optimizer. Le query su tabelle di test di piccole dimensioni possono utilizzare scansioni di tabelle che offrono prestazioni scadenti su scale più grandi e non identificherai gli indici mancanti in questa configurazione.

Cerca di replicare i pattern di I/O della tua applicazione. Il rapporto tra letture e scritture è importante per il profilo delle prestazioni della tua applicazione.

Durata del benchmark

In un sistema complesso, vengono mantenute molte informazioni sullo stato durante l'esecuzione del sistema: vengono stabilite connessioni al database, vengono popolate le cache, vengono generati processi e thread. All'inizio di un test delle prestazioni, l'inizializzazione di questi componenti potrebbe occupare risorse di sistema e influire negativamente sulle prestazioni misurate se il runtime del workload è troppo breve.

Ti consigliamo di eseguire i test delle prestazioni per almeno 20 minuti per ridurre al minimo gli effetti del riscaldamento del sistema. Misura le prestazioni durante uno stato stabile dopo l'avvio e per un periodo di tempo sufficiente a garantire che siano inclusi tutti gli aspetti delle operazioni del database. Ad esempio, i checkpoint del database sono una funzionalità fondamentale dei sistemi di database e possono avere un impatto significativo sulle prestazioni. L'esecuzione di un breve benchmark che si completa prima dell'intervallo di checkpoint nasconde questo fattore importante nel comportamento della tua applicazione.

Test metodici

Quando ottimizzi le prestazioni, modifica una sola variabile alla volta. Se modifichi più variabili tra un'esecuzione e l'altra, non potrai isolare la variabile che ha migliorato il rendimento. In effetti, più modifiche possono compensarsi a vicenda, quindi non vedrai i vantaggi di una modifica appropriata. Se il server di database è sovraccaricato, prova a passare a una macchina con più vCPU mantenendo il carico costante. Se il server del database è sottoutilizzato, prova ad aumentare il carico mantenendo costante la configurazione della CPU.

Topologia e latenze di rete

La topologia di rete del tuo sistema può influire sui risultati del test delle prestazioni. La latenza tra le zone varia. Quando esegui i test delle prestazioni, assicurati che il client e il cluster di database si trovino nella stessa zona per ridurre al minimo la latenza di rete e ottenere le migliori prestazioni, in particolare per le applicazioni con throughput elevato e transazioni brevi, poiché la latenza di rete può essere un componente importante del tempo di risposta complessivo della transazione.

Quando confronti le prestazioni di due sistemi diversi, assicurati che la topologia di rete sia la stessa per entrambi i sistemi. Tieni presente che la variabilità della latenza di rete non può essere eliminata completamente, anche all'interno della stessa zona possono esserci differenze di latenza dovute alle topologie di rete sottostanti.

Quando esegui il deployment della tua applicazione, potresti voler comprendere meglio l'impatto delle latenze tra zone prendendo in considerazione una tipica applicazione web con un volume elevato. L'applicazione ha un bilanciatore del carico che invia richieste a più server web di cui è stato eseguito il deployment in più zone per garantire l'alta affidabilità. Le latenze potrebbero variare a seconda del server web che elabora una richiesta a causa delle differenze di latenza tra le zone.

La figura seguente mostra l'architettura tipica di un'applicazione web che utilizza AlloyDB Omni. Le richieste dei client vengono gestite da un bilanciatore del carico, che inoltra ogni richiesta a uno dei numerosi server web. I server web sono tutti connessi ad AlloyDB Omni. Alcuni server si trovano in una zona diversa da quella in cui è in esecuzione AlloyDB Omni e riscontreranno latenze più elevate durante l'esecuzione delle richieste al database.

Diagramma di flusso che mostra una tipica architettura di un'applicazione web.
Fig. 1: un'immagine di una tipica architettura di applicazione web. Ci aspettiamo latenze inferiori quando i server web nella Zona B effettuano richieste al database perché si trovano nella stessa zona del database AlloyDB Omni.

Monitoraggio delle risorse

Per ottimizzare le prestazioni del sistema di database, devi monitorare l'utilizzo delle risorse sia del sistema di database sia dei sistemi client che lo utilizzano. Monitorando entrambi i sistemi, puoi assicurarti che i sistemi client forniscano un workload sufficiente per ottenere misurazioni significative nel sistema di database. Il monitoraggio dell'utilizzo delle risorse del sistema che stai testando è fondamentale. Altrettanto importante è il monitoraggio dell'utilizzo delle risorse dei sistemi client che utilizzi per gestire il workload. Ad esempio, se vuoi determinare il numero massimo di client che il tuo sistema di database può supportare prima di esaurire le risorse della CPU, avrai bisogno di un numero sufficiente di sistemi client per generare il workload necessario per utilizzare tutte le risorse della CPU nel sistema di database. Non potrai utilizzare il sistema di database in modo intensivo se i computer client che generano il carico non dispongono di una CPU sufficiente.

Test di scalabilità

I test di scalabilità sono un altro aspetto dei test delle prestazioni. La scalabilità si riferisce al modo in cui le metriche sul rendimento cambiano al variare di una caratteristica di un workload. Alcuni esempi di studi di scalabilità includono:

  • In che modo un aumento del numero di richieste in parallelo modifica il throughput e i tempi di risposta?
  • In che modo un aumento delle dimensioni del database influisce sul throughput e sui tempi di risposta?

I test di scalabilità consistono in più esecuzioni di un workload in cui una singola dimensione varia tra le esecuzioni e una o più metriche vengono raccolte e tracciate. Questo tipo di test fornisce informazioni su quali colli di bottiglia esistono nel sistema, quanto carico può gestire il sistema in base a una configurazione specifica, il carico massimo che un sistema può supportare e qual è il comportamento del sistema quando il carico aumenta oltre questi livelli.

Considerazioni sulle dimensioni delle macchine

AlloyDB Omni introduce molte nuove funzionalità in Postgres per migliorare l'affidabilità e la disponibilità del database. Il monitoraggio necessario per farlo utilizza le risorse della macchina che esegue AlloyDB Omni. Le macchine di dimensioni molto ridotte hanno risorse di memoria e CPU limitate, quindi per il benchmarking consigliamo di utilizzare macchine di dimensioni di almeno quattro vCPU.