Bigtable에서 카운터 만들기 및 업데이트
쓰기 시 값을 집계하는 테이블 셀인 집계를 사용하여 Bigtable에서 카운터를 만들고 업데이트하는 방법을 알아봅니다. 이 빠른 시작에서는
Google Cloud CLI 및
cbt CLI
를 사용하여 다음 세 가지 카운터를 만듭니다.
- 누적 합계를 유지하는 카운터
- 추가된 모든 값의 최솟값을 추적하는 카운터
- 추가된 모든 값의 최댓값을 추적하는 카운터
시작하기 전에
-
로그인하여 Google 계정을 사용하세요.
아직 계정이 없으면 새 계정을 등록하세요.
-
Google Cloud CLI를 설치합니다.
-
외부 ID 공급업체(IdP)를 사용하는 경우 먼저 제휴 ID로 gcloud CLI에 로그인해야 합니다.
-
gcloud CLI를 초기화하려면, 다음 명령어를 실행합니다.
gcloud init -
gcloud CLI를 초기화한 후 업데이트하고 필요한 구성요소를 설치합니다.
gcloud components update gcloud components install cbt
-
프로젝트를 만들거나 Google Cloud 선택합니다.
프로젝트를 선택하거나 만드는 데 필요한 역할
- 프로젝트 선택: 프로젝트를 선택하는 데 특정 IAM 역할이 필요하지 않습니다. 역할이 부여된 프로젝트를 선택할 수 있습니다.
-
프로젝트 만들기: 프로젝트를 만들려면
resourcemanager.projects.create권한이 포함된 프로젝트 생성자 역할 (roles/resourcemanager.projectCreator)이 필요합니다. 역할을 부여하는 방법을 알아보세요.
-
프로젝트를 만듭니다. Google Cloud
gcloud projects create PROJECT_ID
PROJECT_ID를 만들려는 Google Cloud 프로젝트의 이름으로 바꿉니다. -
만든 Google Cloud 프로젝트를 선택합니다.
gcloud config set project PROJECT_ID
PROJECT_ID를 프로젝트 이름으로 바꿉니다. Google Cloud
Cloud Bigtable API 및 Cloud Bigtable Admin API API를 사용 설정합니다.
API 사용 설정에 필요한 역할
API를 사용 설정하려면
serviceusage.services.enable권한이 필요합니다. 프로젝트를 만든 경우 소유자 역할 (roles/owner)을 통해 이 권한을 이미 보유하고 있을 가능성이 높습니다. 그렇지 않은 경우 서비스 사용량 관리자 역할 (roles/serviceusage.serviceUsageAdmin)을 통해 이 권한을 얻을 수 있습니다. 역할을 부여하는 방법을 알아보세요.gcloud services enable bigtable.googleapis.com
bigtableadmin.googleapis.com -
Google Cloud CLI를 설치합니다.
-
외부 ID 공급업체(IdP)를 사용하는 경우 먼저 제휴 ID로 gcloud CLI에 로그인해야 합니다.
-
gcloud CLI를 초기화하려면, 다음 명령어를 실행합니다.
gcloud init -
gcloud CLI를 초기화한 후 업데이트하고 필요한 구성요소를 설치합니다.
gcloud components update gcloud components install cbt
-
프로젝트를 만들거나 Google Cloud 선택합니다.
프로젝트를 선택하거나 만드는 데 필요한 역할
- 프로젝트 선택: 프로젝트를 선택하는 데 특정 IAM 역할이 필요하지 않습니다. 역할이 부여된 프로젝트를 선택할 수 있습니다.
-
프로젝트 만들기: 프로젝트를 만들려면
resourcemanager.projects.create권한이 포함된 프로젝트 생성자 역할 (roles/resourcemanager.projectCreator)이 필요합니다. 역할을 부여하는 방법을 알아보세요.
-
프로젝트를 만듭니다. Google Cloud
gcloud projects create PROJECT_ID
PROJECT_ID를 만들려는 Google Cloud 프로젝트의 이름으로 바꿉니다. -
만든 Google Cloud 프로젝트를 선택합니다.
gcloud config set project PROJECT_ID
PROJECT_ID를 프로젝트 이름으로 바꿉니다. Google Cloud
Cloud Bigtable API 및 Cloud Bigtable Admin API API를 사용 설정합니다.
API 사용 설정에 필요한 역할
API를 사용 설정하려면
serviceusage.services.enable권한이 필요합니다. 프로젝트를 만든 경우 소유자 역할 (roles/owner)을 통해 이 권한을 이미 보유하고 있을 가능성이 높습니다. 그렇지 않은 경우 서비스 사용량 관리자 역할 (roles/serviceusage.serviceUsageAdmin)을 통해 이 권한을 얻을 수 있습니다. 역할을 부여하는 방법을 알아보세요.gcloud services enable bigtable.googleapis.com
bigtableadmin.googleapis.com - 다음 명령어를 실행하여 gcloud CLI가 최신 상태이고
cbtCLI 가 포함되어 있는지 확인합니다.gcloud components updategcloud components install cbt
Bigtable 인스턴스를 만듭니다.
bigtable instances createcommand 명령어를 사용하여 인스턴스를 만듭니다.gcloud bigtable instances create counters-quickstart-instance \ --display-name="Counters quickstart instance" \ --cluster-config=id="counters-quickstart-cluster",zone="us-east1-c"
내 인스턴스에 연결
.cbtrc파일을 만들어 프로젝트 및 인스턴스를 사용하도록cbtCLI 를 구성합니다.echo project = PROJECT_ID >> ~/.cbtrc && echo instance = counters-quickstart-instance >> ~/.cbtrcPROJECT_ID를 사용 중인 프로젝트의 ID로 바꿉니다.
.cbtrc파일을 올바르게 설정했는지 확인합니다.cat ~/.cbtrc터미널에는
.cbtrc파일의 콘텐츠가 표시됩니다. 이는 다음과 유사합니다.project = PROJECT_ID instance = counters-quickstart-instance
이제 인스턴스에서
cbtCLI 를 사용할 수 있습니다.
집계 column family가 있는 테이블 만들기
cbt createtable명령어를 사용하여 집계 column family가 3개 있는counters_quickstart_table이라는 테이블을 만듭니다. 각 column family를 다른 집계 유형으로 구성합니다.- column family
max_family는 입력 유형이Integer인Max유형입니다. - column family
min_family는 입력 유형이Integer인Min유형입니다. - column family
sum_family는 입력 유형이Integer인Sum유형입니다.
cbt createtable counters_quickstart_table families=sum_family:never:intsum,min_family:never:intmin,max_family:never:intmax- column family
cbt ls명령어를 실행하여 column family를 나열합니다.cbt ls counters_quickstart_table다음과 유사한 출력이 셸에 표시됩니다.
Family Name GC Policy ----------- --------- max_family <never> min_family <never> sum_family <never>
테이블에서 카운터 만들기
cbt addtocell명령어를 사용하여 세 column family 각각의 새 열에 초기 값5을 씁니다. row keyrow-key1및 타임스탬프0를 사용합니다. 이 작업은 카운터로 사용하는 집계 셀을 만듭니다.cbt addtocell counters_quickstart_table row-key1 sum_family:sum_column=5@0 cbt addtocell counters_quickstart_table row-key1 min_family:min_column=5@0 cbt addtocell counters_quickstart_table row-key1 max_family:max_column=5@0
데이터 읽기
카운터 값을 바이트가 아닌 정수로 보려면 CLI에서 출력을 형식화하는 데 사용할 수 있는
yaml파일을 정의합니다.cbt다음을 실행합니다.echo "families:" > cbtformat.yaml echo " max_family:" >> cbtformat.yaml echo " default_encoding: BigEndian" >> cbtformat.yaml echo " default_type: INT64" >> cbtformat.yaml echo " min_family:" >> cbtformat.yaml echo " default_encoding: BigEndian" >> cbtformat.yaml echo " default_type: INT64" >> cbtformat.yaml echo " sum_family:" >> cbtformat.yaml echo " default_encoding: BigEndian" >> cbtformat.yaml echo " default_type: INT64" >> cbtformat.yamlcbtformat.yaml파일을 올바르게 설정했는지 확인합니다.cat ~/cbtformat.yaml터미널에는
cbtformat.yaml파일의 콘텐츠가 표시됩니다. 이는 다음과 유사합니다.families: max_family: default_encoding: BigEndian default_type: INT64 min_family: default_encoding: BigEndian default_type: INT64 sum_family: default_encoding: BigEndian default_type: INT64cbt read명령어를 사용하여yaml파일을 전달하고 테이블에 추가한 데이터를 읽습니다. 이제 테이블에 각각 다른 집계 유형이 있는 세 개의 열이 있습니다.cbt read counters_quickstart_table format-file=$HOME/cbtformat.yaml다음과 유사한 출력이 셸에 표시됩니다. 값은 정수로 형식화되고 타임스탬프는 UTC 형식입니다.
row-key1 max_family:max_column @ 1970/01/01-00:00:00.000000 5 min_family:min_column @ 1970/01/01-00:00:00.000000 5 sum_family:sum_column @ 1970/01/01-00:00:00.000000 5
카운터 업데이트
셀을 만들 때 사용한 동일한 타임스탬프 를 사용하여 테이블의 각 열에 값 3을 추가합니다. 각 열에서 셀 값은 셀의 집계 유형을 기반으로 기존 값과 병합됩니다.
cbt addtocell counters_quickstart_table row-key1 sum_family:sum_column=3@0 cbt addtocell counters_quickstart_table row-key1 min_family:min_column=3@0 cbt addtocell counters_quickstart_table row-key1 max_family:max_column=3@0cbt read명령어를 다시 사용하여 테이블의 데이터를 읽습니다. 이제 각 셀에 집계된 값이 포함됩니다.cbt read counters_quickstart_table format-file=$HOME/cbtformat.yamlsum_column에는 5와 3의 합계 (8)가 포함되고,min_column에는 여기에 작성된 두 값의 최솟값 (3)이 포함되며,max_column에는 여기에 작성된 두 값의 최댓값 (5)이 포함됩니다.row-key1 max_family:max_column @ 1970/01/01-00:00:00.000000 5 min_family:min_column @ 1970/01/01-00:00:00.000000 3 sum_family:sum_column @ 1970/01/01-00:00:00.000000 8선택사항: SQL을 사용하여 Google Cloud 콘솔에서 테이블을 쿼리합니다.
콘솔에서 Bigtable 인스턴스 페이지를 엽니다. Google Cloud
목록에서
counters-quickstart-instance를 선택합니다.탐색 메뉴에서 Bigtable Studio 를 클릭합니다.
편집기 탭을 클릭합니다.
이 쿼리를 편집기에 붙여넣습니다.
SELECT * FROM `counters_quickstart_table`실행 을 클릭합니다. 쿼리 결과가 결과 테이블에 표시되며 다음과 유사합니다.
_key max_family min_family sum_family row-key1 { "max_column": 5 } { "min_column": 5 } { "sum_column": 8 }
정리
이 페이지에서 사용한 리소스 비용이 계정에 청구되지 않도록 하려면 리소스가 포함된 프로젝트를 삭제하세요. Google Cloud Google Cloud
터미널에서
counters_quickstart_table테이블을 삭제합니다.cbt deletetable counters_quickstart_table인스턴스를 삭제합니다.
cbt deleteinstance counters-quickstart-instance.cbtrc파일을 삭제합니다.rm ~/.cbtrc형식화 파일을 삭제합니다.
rm ~/cbtformat.yaml선택사항: gcloud CLI에서 사용자 인증 정보를 취소합니다.
gcloud auth revoke