포맷과 파일시스템

포맷과 파일시스템 (Formats and Filesystems)

Pinot 수집을 올바른 입력 포맷과 딥 스토리지 파일시스템에 맞추는 방법을 정리한 페이지예요.

출처: Formats and Filesystems

본문

Pinot은 여러 소스 포맷과 딥 스토리지 선택지를 지원해요. 이런 선택은 세그먼트가 어떻게 생성·이동·복구되는지에 영향을 주므로 초기에 정하는 게 좋아요.

소스 포맷 (Source formats)

정확히 지원되는 파일 형식이나 로더 동작이 필요할 때는 원본 포맷 문서를 참고하세요. 메인 랜딩 페이지는 지원되는 데이터 포맷이에요.

파일시스템과 딥 스토리지 (Filesystems and deep storage)

운영 환경에 맞는 딥 스토리지 백엔드를 선택하세요. 자세한 파일시스템 문서는 File Systems에 있어요.

단순하게 유지하기 (Keep it simple)

포맷 결정을 스키마 설계와 섞지 마세요. 스키마는 데이터가 무엇을 의미하는지 나타내고, 파일시스템은 Pinot이 세그먼트를 만든 뒤 어디에 보존할지를 결정해요.

이 페이지가 다룬 내용

이 페이지는 소스 포맷과 딥 스토리지가 수집 설계에 어떻게 들어맞는지 다뤄요.

다음 단계

데이터가 쿼리 시점 전에 정리나 사전 집계가 필요하다면 Transformations and Aggregations를 읽어 보세요.

더 알아보기 (Learn more)