Iceberg 삽입 관련 설정
Iceberg 삽입 관련 설정
Iceberg 테이블 엔진에 대한 삽입 작업에서 데이터 파일의 최대 바이트·행 수와 최대 파티션 수를 제어하는 설정들이에요. 이 설정들은 system.settings 테이블에서 확인할 수 있고 소스 코드에서 자동 생성된 값들이에요.
출처: 문서
본문
이 설정들은 system.settings에서 확인할 수 있고, 소스 코드에서 자동 생성된 값들이에요.
iceberg_insert_max_bytes_in_data_file
삽입 작업 시 iceberg parquet 데이터 파일의 최대 바이트예요. 기본값은 Iceberg 테이블 속성 write.target-file-size-bytes(512 MiB)의 문서화된 기본값을 반영해요. https://iceberg.apache.org/docs/1.5.2/configuration/ 참조. ClickHouse는 제한을 파일에 지금까지 기록된 데이터의 무압축 크기와 비교하는 반면, Iceberg 속성은 결과 파일의 크기를 목표로 한다는 점에 유의하세요. 또한 iceberg_insert_max_rows_in_data_file은 크기와 무관하게 파일을 독립적으로 제한해요.
iceberg_insert_max_partitions
Iceberg 테이블 엔진의 한 번의 삽입 작업당 허용되는 최대 파티션 수예요.
iceberg_insert_max_rows_in_data_file
삽입 작업 시 iceberg parquet 데이터 파일의 최대 행 수예요.