클라우드 스토리지 데이터 피드를 v2 커넥터 프레임워크로 업그레이드

다음에서 지원:

데이터 수집 파이프라인의 안정성, 확장성, 성능을 개선하기 위해 클라우드 스토리지 데이터 피드가 새로운 v2 커넥터 프레임워크로 업그레이드됩니다. 이 새로운 프레임워크는 Google Cloud Storage Transfer Service (STS)를 사용합니다.

v2 커넥터 프레임워크의 이점

v2 커넥터 프레임워크로 업그레이드하면 다음과 같은 데이터 피드의 상당한 개선사항을 이용할 수 있습니다.

  • 폴링 효율성 향상: AWS와 같은 소스에서 폴링할 때 효율성이 크게 개선되었습니다.
  • 향상된 안정성 및 보안: 실시간 소스 사용자 인증 정보 검사를 통해 안전하고 안정적인 연결을 보장합니다.
  • 확장된 ID 지원: AWS 제휴 ID에 대한 기본 지원

이전 타임라인

Cloud Storage, Amazon S3, Amazon SQS, Azure Blob Storage의 기존 커넥터에 대한 v1 커넥터 프레임워크가 지원 중단됩니다.

다음 주요 마일스톤을 참고하세요.

  • 2026년 11월 1일 - 지원 종료: v1 피드에 추가 업데이트가 제공되지 않으며 최선형 지원만 제공됩니다. 중단을 방지하기 위해 Google에서 이 날짜 전에 피드를 이전할 수 있도록 마이그레이션하고 조치를 취하는 것이 좋습니다.
  • 2027년 3월 15일 - 영구 비활성화: 기존 커넥터의 지원이 종료됩니다. 이 날짜가 지나면 v1 커넥터를 계속 사용하는 데이터 피드는 더 이상 작동하지 않으며 오류 메시지를 반환합니다.

자동 이전 및 필요한 조치

원활한 전환을 위해 레거시 v1 커넥터를 사용하는 모든 활성 데이터 피드에 자동 마이그레이션 서비스를 제공합니다.

소스 유형에 따라 자동 마이그레이션이 성공하도록 다음 작업을 수행해야 합니다.

  • Cloud Storage: 서비스 계정에 대한 액세스 권한 부여 문서에 설명된 대로 새 서비스 계정에 특정 권한을 부여합니다.
  • Amazon S3: 환경에서 IP 허용 목록을 사용하는 경우 STS IP 범위를 버킷 정책에 추가해야 합니다. Amazon S3에 대한 STS 액세스를 사용 설정하는 단계를 따르세요.
  • Amazon SQS: 마이그레이션은 단일 Amazon S3 버킷의 메시지가 포함된 SQS 큐만 지원합니다. 대기열이 여러 버킷에서 메시지를 수신하는 경우 버킷별로 별도의 피드를 만듭니다. SQS 대기열이 올바르게 구성되어 있고 SQS 대기열과 Amazon S3 버킷의 액세스 사용자 인증 정보가 동일한지 확인합니다.
  • Microsoft Azure: 방화벽 또는 가상 네트워크를 사용하는 경우 Azure STS 액세스 안내에 따라 STS IP 범위를 허용합니다.
  • 실패한 피드: 현재 피드를 검토하고 잘못된 사용자 인증 정보로 인해 실패한 피드를 수정하여 성공적으로 이전할 수 있도록 합니다.

안전성과 신뢰성

자동 이전 프로세스는 데이터 손실을 방지하는 것을 목표로 합니다. 마이그레이션에는 엄격한 기본 가드레일이 적용됩니다. 마이그레이션 기간이 짧으므로 데이터 중복이 최소화될 것으로 예상됩니다.

도움이 더 필요하신가요? 커뮤니티 회원 및 Google SecOps 전문가에게 문의하여 답변을 받으세요.