BigQuery Data Transfer Service 소개

BigQuery Data Transfer Service를 사용하면 예약된 관리형 데이터 전송을 BigQuery로 자동화할 수 있습니다. 데이터 전송을 구성하면 BigQuery Data Transfer Service가 정기적으로 데이터를 BigQuery로 자동 로드합니다. 또한 데이터 백필을 시작하여 중단이나 불일치 문제를 해결하고, 데이터 세트 복사를 수행하고, 예약된 쿼리를 실행할 수 있습니다. BigQuery Data Transfer Service를 사용하여 BigQuery에서 다른 곳으로 데이터를 전송할 수 없습니다.

전송을 구성하고 관리하려면 Google Cloud 콘솔, bq 명령줄 도구 또는 BigQuery Data Transfer Service API를 사용하면 됩니다. 파이프라인 및 연결 페이지에서는 전송을 만들기 위한 간소화된 워크플로(프리뷰)도 제공합니다. 서비스 업데이트를 받으려면 BigQuery DTS 공지사항 그룹을 구독하세요.

지원되는 데이터 소스

BigQuery Data Transfer Service는 다음 데이터 소스에서 데이터 로드를 지원합니다.

• SaaS 플랫폼:
• Salesforce
• Salesforce Marketing Cloud
• ServiceNow
• 마케팅 플랫폼:
• Facebook Ads
• HubSpot (프리뷰)
• Klaviyo (프리뷰)
• Mailchimp (미리보기)
• 결제 플랫폼:
• PayPal(프리뷰)
• Stripe(프리뷰)
• Shopify (미리보기)
• 데이터베이스 및 데이터 웨어하우스:
• Amazon Redshift
• Apache Hive Metastore
• Microsoft SQL Server (프리뷰)
• MySQL
• Oracle
• PostgreSQL
• Snowflake
• Teradata
• 클라우드 스토리지:
• Cloud Storage
• Amazon Simple Storage Service(Amazon S3)
• Azure Blob Storage
• Google 서비스:
• Campaign Manager
• 비교 쇼핑 서비스(CSS) 센터(프리뷰)
• Display & Video 360
• Google Ads
• Google Ad Manager
• Google 애널리틱스 4
• Google 판매자 센터(미리보기)
• Search Ads 360
• Google Play
• YouTube 채널
• YouTube 콘텐츠 소유자

데이터 전송 SLO 고려사항

데이터 전송 SLO는 BigQuery Data Transfer Service를 사용하여 Google Cloud내 소스에서 자동으로 예약된 데이터 전송에 적용됩니다.

서드 파티 또는Google Cloud 이외의 소스가 포함된 데이터 전송의 경우 이러한 소스의 서비스 중단이 BigQuery Data Transfer Service의 성능에 영향을 줄 수 있습니다. 따라서 데이터 전송 SLO는Google Cloud 이외의 소스에서 BigQuery Data Transfer Service 데이터 전송에는 적용되지 않습니다.

지원되는 리전

BigQuery와 마찬가지로 BigQuery Data Transfer Service는 여러 단일 리전을 사용할 수 있는 멀티 리전 리소스입니다.

BigQuery 데이터 세트의 지역은 BigQuery Data Transfer Service로 전송되는 데이터를 저장하기 위해 대상 데이터 세트를 만들 때 지정됩니다. 전송을 설정할 때 전송 구성은 대상 데이터세트와 동일한 위치에 설정됩니다. BigQuery Data Transfer Service는 대상 데이터 세트와 동일한 위치에서 데이터를 처리하고 스테이징합니다.

BigQuery Data Transfer Service는 데이터가 저장된 모든 리전에서 대상 데이터 세트가 있는 모든 위치로의 데이터 전송을 지원합니다.

BigQuery Data Transfer Service의 전송 및 리전 호환성에 대한 자세한 내용은 데이터 세트 위치 및 전송을 참조하세요. BigQuery에서 지원되는 리전은 데이터 세트 위치를 참조하세요.

데이터 전송과 함께 예약 슬롯 사용

BigQuery Data Transfer Service에 의해 트리거된 작업은 프로젝트, 폴더 또는 조직이 다음 작업 유형 중 하나를 사용하여 예약에 할당된 경우에만 예약 슬롯을 사용합니다.

• QUERY를 사용하여 작업 쿼리
• PIPELINE을 사용하여 작업 로드
데이터 세트를 복사하는 작업은 예약 슬롯을 사용하지 않습니다.

가격 책정

BigQuery Data Transfer Service 가격에 대한 자세한 내용은 가격 책정 페이지를 참조하세요.

데이터가 BigQuery로 전송되면 표준 BigQuery 스토리지와 쿼리 가격 책정이 적용됩니다.

할당량

BigQuery Data Transfer Service 할당량에 대한 자세한 내용은 할당량 및 한도 페이지를 참조하세요.

전송 구성 문제 해결

BigQuery Data Transfer Service 문제 해결에 대한 자세한 내용은 전송 구성 문제 해결을 참조하세요.

다음 단계

• 해당 데이터 소스의 설명서를 참조하여 전송을 만드는 방법을 알아보세요.