내보낸 데이터 가져오기
내보낸 데이터 가져오기
LangSmith 대량 내보내기 Parquet 데이터를 BigQuery, Snowflake, Redshift, Clickhouse 또는 DuckDB로 가져와요.
S3 및 Parquet 형식의 데이터 가져오기는 대부분의 분석 시스템에서 일반적으로 지원돼요. 문서 링크는 아래를 참고하세요:
출처: 문서
본문
BigQuery
데이터를 BigQuery로 가져오려면 Parquet에서 데이터 로드와 Hive 파티셔닝된 로드를 참고하세요.
Snowflake
클라우드에서 로드 문서를 따라 S3에서 Snowflake로 데이터를 로드할 수 있어요.
RedShift
AWS COPY 명령 문서를 따라 S3 또는 Parquet에서 Amazon Redshift로 데이터를 COPY할 수 있어요.
Clickhouse
Clickhouse에서 S3/Parquet 형식의 데이터를 직접 쿼리할 수 있어요. 예를 들어 GCS를 사용한다면 다음과 같이 데이터를 쿼리할 수 있어요:
SELECT count(distinct id) FROM s3('https://storage.googleapis.com/<bucket>/<prefix>/export_id=<export_id>/**',
'access_key_id', 'access_secret', 'Parquet')
자세한 내용은 Clickhouse S3 통합 문서를 참고하세요.
DuckDB
DuckDB를 사용해 S3의 데이터를 SQL로 인메모리 쿼리할 수 있어요. S3 가져오기 문서를 참고하세요.