Cloud Storage 데이터 피드를 v2 커넥터 프레임워크로 업그레이드
데이터 수집 파이프라인의 안정성, 확장성, 성능을 개선하기 위해 Cloud Storage 데이터 피드를 새로운 v2 커넥터 프레임워크로 업그레이드하고 있습니다. 이 새로운 프레임워크는 Google Cloud Storage Transfer Service (STS)를 사용합니다.
v2 커넥터 프레임워크의 이점
v2 커넥터 프레임워크로 업그레이드하면 데이터 피드의 다음과 같은 중요한 개선사항을 이용할 수 있습니다.
- 향상된 폴링 효율성: AWS와 같은 소스에서 폴링할 때 효율성이 크게 개선됩니다.
- 향상된 안정성 및 보안: 실시간 소스 사용자 인증 정보 검증을 통해 안전하고 안정적인 연결을 보장합니다.
- 확장된 ID 지원: AWS 제휴 ID에 대한 기본 지원이 제공됩니다.
마이그레이션 일정
Cloud Storage, Amazon S3, Amazon SQS, Azure Blob Storage 기존 커넥터의 v1 커넥터 프레임워크가 지원 중단됩니다.
다음 주요 단계를 참고하세요.
- 2026년 10월 1일 - 지원 종료: v1 피드에 더 이상 업데이트가 제공되지 않으며 최선의 지원만 제공됩니다. 중단을 방지하기 위해 이 날짜 전에 Google에서 피드를 마이그레이션할 수 있도록 마이그레이션하고 조치를 취하는 것이 좋습니다.
- 2027년 3월 15일 - 영구 비활성화: 기존 커넥터의 지원이 종료됩니다. 이 날짜 이후에도 v1 커넥터를 계속 사용하는 데이터 피드는 더 이상 작동하지 않으며 오류 메시지를 반환합니다.
자동 마이그레이션 및 필수 작업
원활한 전환을 위해 기존 v1 커넥터를 사용하는 모든 활성 데이터 피드에 자동 마이그레이션 서비스를 제공합니다.
자동 마이그레이션을 성공적으로 수행하려면 소스 유형에 따라 다음 조치를 취해야 합니다.
- Cloud Storage: 서비스 계정에 대한 액세스 권한 부여 문서에 설명된 대로 새 서비스 계정에 특정 권한을 부여합니다.
- Amazon S3: 환경에서 IP 허용 목록을 사용하는 경우 버킷 정책에 STS IP 범위를 추가해야 합니다. 단계에 따라 Amazon S3에 대한 STS 액세스를 사용 설정합니다.
- Amazon SQS: 마이그레이션은 단일 Amazon S3 버킷의 메시지가 포함된 SQS 큐만 지원합니다. 큐가 여러 버킷의 메시지를 수신하는 경우 각 버킷에 대해 별도의 피드를 만듭니다. SQS 큐가 올바르게 구성되어 있고 SQS 큐와 Amazon S3 버킷의 액세스 사용자 인증 정보가 동일한지 확인합니다.
- Microsoft Azure: 방화벽 또는 가상 네트워크를 사용하는 경우 Azure STS 액세스 안내에 따라 STS IP 범위를 허용합니다.
- 실패한 피드: 현재 피드를 검토하고 잘못된 사용자 인증 정보로 인해 실패한 피드를 수정하여 성공적으로 마이그레이션할 수 있도록 합니다.
안전성과 신뢰성
자동 마이그레이션 프로세스는 데이터 손실을 방지하는 것을 목표로 합니다. 마이그레이션에는 엄격한 기본 제공 가드레일이 있습니다. 마이그레이션 기간 동안 데이터 중복이 최소화될 것으로 예상됩니다.
도움이 더 필요하신가요? 커뮤니티 회원 및 Google SecOps 전문가에게 문의하여 답변을 받으세요.