Lakehouse for Apache Iceberg 를 사용하면 Lakehouse 런타임 카탈로그 내에서 Apache Iceberg REST 카탈로그 엔드포인트 를 관리할 수 있습니다. 콘솔을 사용하면 이러한 카탈로그를 만들고, 구성하고, 모니터링하여 쿼리 엔진 연결에 필요한 메타데이터 레이어를 설정할 수 있습니다. Google Cloud
시작하기 전에
-
BigLake API를 사용 설정합니다.
API 사용 설정에 필요한 역할
API를 사용 설정하려면
serviceusage.services.enable권한이 포함된 서비스 사용량 관리자 IAM 역할(roles/serviceusage.serviceUsageAdmin)이 필요합니다. 역할 부여 방법 알아보기
필요한 역할
콘솔에서 Lakehouse 런타임 카탈로그를 사용하는 데 필요한 권한을 얻으려면 관리자에게 프로젝트에 대한 다음 IAM 역할을 부여해 달라고 요청하세요. Google Cloud
- BigLake 관리자 (
roles/biglake.admin) - 스토리지 관리자 (
roles/storage.admin)
역할 부여에 대한 자세한 내용은 프로젝트, 폴더, 조직에 대한 액세스 관리를 참조하세요.
커스텀 역할이나 다른 사전 정의된 역할을 통해 필요한 권한을 얻을 수도 있습니다.
관리 작업
콘솔에서 Apache Iceberg REST 카탈로그 리소스에 대해 다음 관리 작업을 수행할 수 있습니다. Google Cloud
- 카탈로그 만들기: 기본 Cloud Storage 버킷 웨어하우스를 가리키는 Apache Iceberg REST 카탈로그 관리 엔드포인트를 만듭니다.
- 네임스페이스 만들기: Iceberg REST 카탈로그 내에 네임스페이스를 만들어 관련 테이블을 그룹화합니다.
- 사용자 인증 정보 벤더 제공 사용 설정: 기존 카탈로그의 인증 방법을 사용자 인증 정보 벤더 제공 모드로 전환하여 수명이 짧은 스토리지 토큰을 쿼리 엔진에 직접 제공합니다.
- 카탈로그 세부정보 가져오기: 클라이언트 연결에 필요한 REST 카탈로그 URI를 비롯한 카탈로그의 속성 및 메타데이터를 봅니다.
- 테이블 가져오기: Dataflow의 작업 빌더 웹 인터페이스를 사용하여 외부 Apache Iceberg REST 카탈로그의 데이터를 Lakehouse 테이블로 직접 수집합니다.
- 카탈로그 삭제: Lakehouse 런타임 카탈로그에서 카탈로그 메타데이터 관리 엔드포인트를 등록 취소합니다.
- 네임스페이스 삭제: 더 이상 필요하지 않은 경우 Iceberg REST 카탈로그에서 네임스페이스를 삭제합니다.
- 테이블 가져오기: Dataflow의 작업 빌더 웹 인터페이스를 사용하여 외부 Apache Iceberg REST 카탈로그의 데이터를 Lakehouse 테이블로 직접 수집합니다.
- 카탈로그 삭제: Lakehouse 런타임 카탈로그에서 카탈로그 메타데이터 관리 엔드포인트를 등록 취소합니다.
- 감사 로그 보기: 관리 작업 및 데이터 액세스 활동의 검증 가능한 기록을 위해 Cloud 감사 로그를 검사합니다.
가격 책정
가격 책정 세부정보는 Lakehouse for Apache Iceberg 가격 책정을 참조하세요.
다음 단계
Apache Iceberg REST 카탈로그 엔드포인트에 대해 자세히 알아보세요.