Ringkasan columnar engine

Pilih versi dokumentasi:

Halaman ini menjelaskan columnar engine AlloyDB Omni dan memberikan petunjuk tentang cara menggunakan mesin di instalasi cluster container dan Kubernetes. Halaman ini mengasumsikan bahwa Anda sudah memahami PostgreSQL.

Columnar engine AlloyDB Omni mempercepat pemrosesan kueri SQL untuk pemindaian, penggabungan, dan agregasi dengan menyediakan komponen berikut:

  • Penyimpanan kolom yang berisi data tabel dan tampilan terwujud untuk kolom yang dipilih, yang disusun ulang ke dalam format berorientasi kolom.

  • Mesin eksekusi dan perencana kueri berbasis kolom yang mendukung penggunaan penyimpanan kolom dalam kueri.

Anda dapat menggunakan columnar engine di instance utama, instance pool baca, atau keduanya. Anda juga dapat menggunakan kolom otomatis untuk menganalisis workload dan otomatis mengisi penyimpanan kolom dengan kolom yang memberikan peningkatan performa terbaik.

Untuk menggunakan columnar engine dengan kueri tertentu, semua kolom yang direferensikan dalam kueri, seperti penggabungan dan pemindaian, harus berada di penyimpanan kolom.

Secara default, columnar engine ditetapkan untuk menggunakan memori instance sebesar 1 GB. Bergantung pada workload, penggunaan memori, dan apakah Anda telah mengonfigurasi pool baca, Anda dapat memilih untuk mengurangi alokasi memori columnar engine di instance utama dan mengalokasikan lebih banyak memori ke instance pool baca.

Untuk melihat dan memantau penggunaan memori oleh columnar engine, lihat Melihat penggunaan memori penyimpanan kolom. Untuk mengubah ukuran memori yang digunakan oleh penyimpanan kolom, lihat Mengonfigurasi ukuran penyimpanan kolom. Untuk menemukan ukuran memori columnar engine yang direkomendasikan untuk instance Anda, lihat Merekomendasikan ukuran memori penyimpanan kolom.

Jenis kueri yang diuntungkan oleh columnar engine

Kueri tertentu dapat diuntungkan oleh columnar engine. Berikut adalah daftar operasi dan pola kuerinya yang paling diuntungkan oleh columnar engine:

Operasi Pola kueri
Pemindaian tabel Filter selektif, seperti klausa WHERE.
Sejumlah kecil kolom dari tabel atau tampilan terwujud yang lebih besar.
Ekspresi seperti LIKE, SUBSTR, atau TRIM.
Fungsi agregasi Hanya ekspresi seperti SUM, MIN, MAX, AVG, dan COUNT.
Di awal kueri pemindaian kolom.
Tidak dikelompokkan atau dikelompokkan menurut kolom.
ORDER-BY Hanya jika operator berada di awal kueri pemindaian kolom.
SORT Hanya jika operator berada di awal kueri pemindaian kolom dan hanya mengurutkan kolom dasar tabel atau tampilan terwujud.
LIMIT Hanya jika operator berada di awal kueri pemindaian kolom dan berada sebelum operator SORT atau GROUP BY.
INNER HASH JOIN Hanya jika kunci yang digunakan adalah kolom dan tidak ada penentu gabungan yang digunakan.
Penggabungan selektif Hanya jika penggabungan berada di awal kueri pemindaian kolom.

Untuk mengetahui informasi selengkapnya tentang kueri mana yang paling cocok dengan columnar engine, apakah columnar engine digunakan oleh kueri, dan bagaimana cara menggunakannya, lihat Memverifikasi penggunaan columnar engine menggunakan EXPLAIN.

Cara menggunakan columnar engine di instance AlloyDB Omni

Untuk menggunakan columnar engine di instance AlloyDB Omni, Anda melakukan langkah-langkah tingkat tinggi berikut:

  1. Aktifkan mesin di instance.

    Mengaktifkan mesin adalah operasi satu kali dan memerlukan pengaktifan ulang database.

  2. Tambahkan kolom ke penyimpanan kolom.

    Untuk menambahkan kolom ke penyimpanan kolom, gunakan salah satu metode berikut:

  3. Anda dapat melacak konten penyimpanan kolom menggunakan tampilan g_columnar_relations, dan setelah kolom ditambahkan, Anda dapat menggunakan pernyataan EXPLAIN untuk memverifikasi penggunaan columnar engine dalam kueri SQL.

Untuk mengetahui petunjuk mendetail tentang cara menggunakan columnar engine, lihat Mengonfigurasi columnar engine.

Data yang dapat Anda tambahkan ke penyimpanan kolom

Ada beberapa batasan pada jenis data dan sumber data yang dapat Anda gunakan saat menambahkan kolom ke penyimpanan kolom.

Jenis data yang didukung

Columnar engine hanya mendukung kolom dengan jenis data bawaan berikut:

  • array
  • bigint
  • boolean
  • bytea
  • char
  • date
  • decimal
  • double precision
  • enum
  • float4
  • float8
  • integer
  • json
  • jsonb
  • numeric
  • real
  • serial
  • short
  • smallint
  • text
  • timestamp
  • uuid
  • varchar

Columnar engine mengabaikan upaya untuk menambahkan kolom dengan jenis data yang tidak didukung ke penyimpanan kolom secara manual.

Sumber data yang tidak didukung

Columnar engine tidak mendukung tabel atau tampilan terwujud dengan atribut berikut sebagai sumber data:

  • Tabel berpartisi non-leaf

  • Tabel asing

  • Tabel atau tampilan dengan kurang dari 5.000 baris

Batasan columnar engine

  • Jika Anda menjalankan kueri analisis pada kolom yang memiliki indeks, pengoptimal AlloyDB Omni mungkin memilih untuk menggunakan penyimpanan baris.
  • Kolom yang ditambahkan secara manual ke penyimpanan kolom tidak akan otomatis dihapus. Untuk menghapus kolom yang ditambahkan secara manual, gunakan google_columnar_engine_drop di instance Anda.
  • Kolom otomatis dapat menambahkan dan menghapus kolom secara dinamis berdasarkan penggunaan kueri.
  • Tidak semua jenis data didukung oleh columnar engine. Untuk melihat jenis data yang didukung, lihat jenis data yang didukung.

  • Update baris yang sering akan membatalkan data kolom. Untuk memvalidasi tabel atau a tampilan terwujud di penyimpanan kolom, Anda dapat mengurangi frekuensi update, atau menjadwalkan refresh columnar engine lebih sering.

    Anda dapat membandingkan kolom invalid_block_count dan total_block_count di g_columnar_relations untuk memeriksa apakah tabel atau tampilan Anda terpengaruh. Jika Anda sering atau memiliki perubahan volume tinggi pada tabel atau tampilan, invalid_block_count akan tinggi.

Langkah berikutnya