이 페이지에서

For AI agents: a documentation index is available at /docs/llms.txt. Append .md to any page URL for markdown, or send Accept: text/markdown.

Amazon RedShift

웨어하우스에 대한 이벤트 필터링은 EU 지역에서 사용할 수 없습니다.

Amplitude 이벤트 데이터를 Redshift 계정에 업로드하세요. Amplitude UI를 통해 반복 동기화를 설정할 수 있으며 과거 데이터의 동기화를 수동으로 시작할 수 있습니다.

제한

  • 단일 Redshift SQL 쿼리의 최대 실행 시간은 12시간입니다.

고려 사항

  • Amplitude는 공용 Redshift 엔드포인트만 지원합니다. 개인 엔드포인트는 지원되지 않습니다.
  • 기본적으로 Redshift 클러스터는 전체 들어오는 트래픽을 허용하지 않습니다. Redshift 클러스터의 보안 그룹에 Amplitude의 IP 주소를 허용목록에 추가해야 합니다.

사전 조건

Amplitude에서 관리자 권한과 Redshift에서 리소스를 활성화할 수 있는 역할이 필요합니다.

Redshift 클러스터의 보안 그룹에서 Amplitude의 IP 주소를 허용목록에 추가하십시오. 자세한 내용은 Redshift 설명서를 참조하십시오.

Redshift 클러스터와 연결된 보안 그룹 페이지에서 인바운드 규칙을 추가합니다. 자세한 지침은 Redshift 문서를 참조하십시오.

Redshift 클러스터에 할당된 보안 그룹을 찾으려면 다음과 같이 하십시오.

  1. Redshift 클러스터로 이동합니다.

  2. 속성 탭으로 이동한 후 네트워크 및 보안 설정에서 VPC 보안 그룹에 대한 링크를 사용합니다.

    다음 정보를 추가하십시오.

    • 프로토콜: TCP.
    • 포트 범위: 데이터 소스에서 사용되는 열린 포트의 번호입니다.
    • 소스: 사용자 지정 IP(기본값). Amplitude 데이터 센터를 EU 또는 미국 중 어느 곳에서 사용하고 있는지에 따라 올바른 IP 주소를 추가하십시오.
      • Amplitude 미국 IP 주소:
        • 52.33.3.219
        • 35.162.216.242
        • 52.27.10.221
      • Amplitude EU IP 주소:
        • 3.124.22.25
        • 18.157.59.125
        • 18.192.47.195
    • 설명: 규칙에 대한 설명입니다.

연동 설정

Redshift로 반복적으로 데이터 내보내기 설정

반복 데이터 내보내기를 생성하는 과정은 3단계로 이루어집니다. 각 동기화는 일반적으로 5~10분 첫 사용 후 완료되며 각 작업의 상태를 모니터링할 수 있습니다.

Amplitude 데이터를 Redshift로 반복적으로 내보내도록 설정하려면 다음과 같이 하십시오.

  1. Amplitude 데이터에서 카탈로그를 클릭하고 대상 탭을 선택합니다.

  2. 웨어하우스 대상 섹션에서 Redshift를 클릭합니다.

  3. Redshift로 데이터 내보내기에서 내보낼 데이터를 선택합니다. 오늘 수집된 이벤트 및 향후 이벤트를 내보내거나, 병합된 모든 Amplitude ID 내보내기, 또는 둘 다를 선택할 수 있습니다. 이벤트의 경우 필터링 조건을 지정하여 특정 기준을 충족하는 이벤트만 내보낼 수도 있습니다.

  4. 이벤트 테이블 및 병합 ID 테이블 스키마를 검토하고 다음을 누릅니다.

  5. Amplitude에 대한 Redshift 자격 증명 섹션에 다음 정보를 입력하십시오.

    • 사용자: Amplitude가 Redshift 인스턴스에 연결하기 위해 사용하는 Redshift 사용자 계정입니다.
    • 비밀번호: 사용자와 연결된 비밀번호입니다.
    • 데이터베이스: Amplitude가 데이터를 내보내고 저장하는 데이터베이스입니다. Amplitude는 Amplitude 데이터를 위한 전용 데이터베이스를 구축할 것을 권장합니다.
    • 클러스터 호스트 주소: 데이터베이스를 호스팅하는 클러스터의 끝점의 주소입니다.
    • 포트: 클러스터 호스트 주소의 포트입니다. 포트에는 숫자만 포함될 수 있습니다. 기본값은 5439입니다.
  6. 자격 증명 섹션 옆에서, Amplitude는 Redshift 객체를 생성하는 데 사용하는 쿼리를 동적으로 생성합니다. 클립보드에 복사하려면 복사를 클릭합니다. 이제 Redshift CLI에 붙여넣을 수 있습니다.

  7. 다음을 클릭합니다. Amplitude는 사용자가 입력한 자격 증명을 사용하여 테스트 데이터를 업로드하려고 시도합니다. 업로드가 성공적으로 완료되면 완료를 클릭합니다.

Amplitude는 모든 향후 이벤트를 자동으로 Redshift로 전송합니다.

여기에서 Amplitude는 최선의 노력을 기울여 마이크로 배치 파일을 생성하여 이를 고객 소유의 Redshift 계정에 로드합니다. 내보내기는 일반적으로 10분마다 실행되지만 시스템 로드와 데이터 양에 따라 자주 실행되지 않을 수도 있습니다. 일반적으로 Amplitude가 이벤트를 수신한 후 20분 첫 사용 후 Redshift 계정에서 데이터를 볼 수 있지만 시기는 다를 수 있습니다.

과거 Amplitude 데이터를 Redshift로 내보내기

Amplitude에서 Redshift로 과거 데이터를 내보내려면 다시 채우기 탭으로 이동하여 날짜 범위를 선택한 다음 다시 채우기 시작을 클릭하십시오.

이 프로세스는 데이터 볼륨, 웨어하우스 크기, 클러스터 수행 회수가, 네트워크 대역폭, 현재 보유하고 있는 동시 기록 데이터 내보내기 수 등 여러 요인에 따라 하루에서 몇 주까지 걸릴 수 있습니다.

다시 채우기 범위가 이전에 내보낸 데이터의 범위와 겹치는 경우 Amplitude는 중복된 데이터를 제거합니다.

Redshift 내보내기 형식

이벤트 테이블 스키마에는 다음 열이 포함됩니다.

병합된 사용자 테이블 스키마

병합된 사용자 테이블 스키마에는 다음이 포함되어 있습니다.

문제 해결

데이터를 Redshift로 내보낼 때 몇 가지 일반적인 오류가 발생할 수 있습니다. 다음은 오류 및 관련 해결 방법의 목록입니다.

문자열 길이 초과 DDL 오류

이 오류는 문자열의 길이가 테이블 스키마에 정의된 최대 허용 길이를 초과할 때 발생합니다. 이 오류를 방지하려면 내보낼 데이터가 스키마 정의를 준수하는지 확인하십시오.

솔루션:

  1. 데이터 길이 유효성 검사: 데이터를 내보내기 전에 문자열 필드의 길이를 검사하여 허용되는 최대 길이를 초과하지 않는지 확인하십시오.
  2. 스키마 조정: 필요한 경우 VARCHAR 필드의 길이를 늘려 더 긴 문자열을 수용하도록 스키마를 조정합니다.

이 내용이 도움이 되었나요?