테이블 행이 추가, 삭제 또는 업데이트되면 열 기반 엔진이 열 스토어의 데이터를 즉시 업데이트하지 않습니다. 대신 열 스토어에서 영향을 받는 콘텐츠를 무효로 표시하고 열 스토어의 열 중심 데이터와 행 캐시 및 데이터베이스 스토리지의 행 중심 데이터를 모두 사용하여 쿼리를 계획하고 실행합니다.
시간이 지남에 따라 무효화되는 데이터 블록이 많아지면 열 기반 엔진에서 제공하는 쿼리 성능 개선이 줄어들어 쿼리 성능 개선을 다시 얻기 위해 열 기반 데이터를 새로고침해야 하는 지점에 도달합니다. 이 새로고침 기준점에 도달하면 열 기반 엔진은 백그라운드 작업을 사용하여 열 스토어에서 잘못된 데이터를 새로고침합니다. 기본적으로 열 기반 엔진은 50을 새로고침 기준점으로 사용합니다. 이는 열 스토어의 지정된 콘텐츠에서 50%가 무효화되면 새로고침으로 표시된다는 것을 의미합니다. 이 새로고침 기준점을 변경하여 자동 새로고침의 오버헤드를 조정하고 애플리케이션 워크로드의 지속적인 쿼리 성능을 개선할 수 있습니다.
또한 언제든지 열 기반 엔진에 로드된 테이블과 ScaNN 색인을 수동으로 새로고침할 수 있습니다. 일반적으로 테이블의 변경사항이 표시된 다음 가능한 한 빨리 열 스토어에 반영되도록 하려면 수동 새로고침을 실행합니다.
무효 데이터 비율 확인
애플리케이션이 테이블의 행을 추가, 삭제, 업데이트할 때 열 기반 엔진은 열 스토어 내에서 영향을 받은 데이터를 무효로 표시합니다. g_columnar_relations 뷰를 쿼리하여 테이블과 구체화된 뷰의 무효 데이터 비율을 확인할 수 있습니다. 이를 통해 수동 새로고침이 필요한지, 또는 자동 새로고침 기준점을 조정해야 하는지를 판단할 수 있습니다.
열 저장소의 모든 관계에 대한 무효화 비율을 확인하려면 다음 쿼리를 실행하세요.
SELECT relation_name, invalid_percentage FROM g_columnar_relations;
특정 테이블의 무효화 비율을 확인하려면 쿼리에 WHERE 절을 추가합니다.
SELECT relation_name,
CASE
WHEN total_block_count > 0 THEN (invalid_block_count * 100.0 / total_block_count)
ELSE 0.0
END AS invalid_block_percentage
FROM
g_columnar_relations;
WHERE
relation_name = TABLE_NAME
TABLE_NAME을 테이블 또는 구체화된 뷰의 이름이 포함된 문자열로 바꿉니다. 리소스가 public 이외의 스키마에 있는 경우 스키마 이름을 SCHEMA_NAME.TABLE_NAME 형식으로 지정해야 합니다(예: myschema.mytable).
특정 색인의 무효화 비율을 확인하려면 쿼리에 WHERE 절을 추가합니다.
SELECT index_name,
CASE
WHEN total_block_count > 0 THEN (invalid_block_count * 100.0 / total_block_count)
ELSE 0.0
END AS invalid_block_percentage
FROM
g_columnar_indexes;
WHERE
index_name = INDEX_NAME
열 기반 엔진의 새로고침 기준점 변경
열 기반 엔진의 새로고침 기준점을 변경하려면 google_columnar_engine.refresh_threshold_percentage 데이터베이스 플래그 값을 수정해야 합니다.
ALTER SYSTEM SET google_columnar_engine.refresh_threshold_percentage=THRESHOLD;
THRESHOLD을 1~100 사이의 정수 값으로 바꿉니다. 이 값은 콘텐츠 내 데이터 블록 중 몇 퍼센트가 무효화되어야 콘텐츠가 새로고침 대상으로 표시되는지를 지정합니다.
열 스토어에서 테이블 및 벡터 색인 수동 새로고침
열 기반 엔진에서 제공하는 전용 SQL 함수를 사용하면 테이블과 벡터 색인을 언제든지 수동으로 새로고침할 수 있습니다. 지원되는 색인 유형은 ScaNN 및 HNSW입니다.
열 기반 엔진에서 테이블 데이터를 새로고침하려면 google_columnar_engine_refresh 함수를 실행하세요.
SELECT google_columnar_engine_refresh(TABLE_NAME);
TABLE_NAME을 테이블 또는 구체화된 뷰의 이름이 포함된 문자열로 바꿉니다. 리소스가 public 이외의 스키마에 있는 경우 스키마 이름을 SCHEMA_NAME.TABLE_NAME 형식으로 지정해야 합니다(예: myschema.mytable).
마찬가지로 열 기반 엔진에서 벡터 색인을 수동으로 새로고침하려면 google_columnar_engine_refresh_index 함수를 실행하세요.
SELECT google_columnar_engine_refresh_index(index => INDEX_NAME);
INDEX_NAME을 새로고침할 색인의 이름이 포함된 문자열로 바꿉니다.