설계 순서
워크로드의 실제 상황에 따라 네 가지 결정을 내리세요.
견고한 테이블 설계는 행의 의미를 정하는 것에서 시작해 정렬 키, 파티션 경계, 물리적 분포를 선택합니다.
- 모델동일 키 처리 방식
- 정렬 키읽기 지역성
- 파티션범위 + 수명 주기
- 버킷태블릿 분포
- 검증크기 + 스큐 + 실행 계획
Doris 101: Apache Doris 테이블 가이드
Doris 101테이블 가이드
모듈 03설계 순서
기준 버전: Apache Doris 4.x1 / 7
테이블 모델DUPDuplicate Key UNIUnique Key AGGAggregate Key
동일한 키는 무엇을 의미해야 할까요?
Duplicate는 모든 행을 유지하고, Unique는 키당 하나의 논리적 행을 유지하며, Aggregate는 선언된 함수로 값 열을 결합합니다.
사실 데이터, 로그, 상세 이벤트를 키 기준 병합 없이 추가합니다.
변경 가능한 엔터티를 UPSERT하고 최신 논리 행을 유지합니다.
SUM, MAX, MIN, REPLACE 또는 관련 함수로 측정값을 병합합니다.
정렬 키효율적인 접두사 약한 접두사
스토리지가 일반적인 필터를 활용할 수 있는 위치에 배치하세요.
Doris는 키 열 순서로 데이터를 저장하므로, 선행 키 접두사는 데이터 프루닝, 압축 및 스캔 비용에 큰 영향을 미칩니다.
일반적인 쿼리 조건에 맞는 컴팩트한 열입니다.
- 자주 필터링됨
- 프루닝 효과가 큼
- 안정적이고 폭이 적당함
일반적인 액세스 경로와 관련 없는 너비가 넓은 열입니다.
- 거의 필터링되지 않음
- 프루닝 효과가 낮음
- 너무 앞에 배치된 긴 문자열
파티셔닝MAN수동 DYN동적 AUTO자동
워크로드가 프루닝할 수 있는 논리적 경계를 만드세요.
파티션은 데이터 범위나 값 그룹을 분리하고, 수명 주기 작업을 지원하며, 쿼리가 관련 없는 데이터를 건너뛸 수 있게 합니다.
RANGE 또는 LIST 경계를 명시하고 사용자가 직접 제어합니다.
예약된 시간 파티션을 롤링 방식으로 생성하고 만료합니다.
데이터 적재 중 값에 따라 RANGE 또는 LIST 파티션을 생성합니다.
버킷팅해시 버킷팅 랜덤 버킷팅
각 파티션을 유용한 태블릿으로 분산하세요.
해시 버킷팅은 키에 따라 결정적으로 배치하고, 랜덤 버킷팅은 분포 키 없이 행을 분산합니다.
동일한 키 값은 결정적으로 매핑됩니다.
- 분포가 균일하고 카디널리티가 높은 키를 선택하세요
- 데이터 분포를 고려한 JOIN을 지원합니다
- 키를 잘못 선택하면 데이터가 편중될 수 있습니다
키를 지정하지 않아도 행이 분산됩니다.
- 간단하고 균등한 데이터 적재
- 안정적인 키가 없어도 유용합니다
- 데이터 지역성이 낮습니다
워크로드 패턴LOG이벤트 분석 CDC최신 상태 KPI메트릭 롤업
선택한 요소를 일관된 테이블 패턴으로 결합하세요.
가장 완성도 높은 DDL은 내부적으로 일관됩니다: 행의 의미, 프루닝, 분포, 데이터 적재 동작이 모두 워크로드를 뒷받침합니다.
원본 행을 보존하는 Duplicate 모델, 시간 프루닝, 균등한 병렬 스캔.
고유한 비즈니스 키와 UPSERT 중심의 데이터 적재.
안정적인 차원과 선언된 값 집계 방식을 사용합니다.
검증 및 개선
Doris가 실제로 생성한 테이블을 확인하세요.
워크로드 규모를 확장하기 전에 파티션 프루닝, 태블릿 크기, 행 분포, 쿼리 계획, 데이터 적재 동작을 확인하세요.
- 데이터 적재대표적인 데이터 양
- 확인파티션 + 태블릿
- EXPLAIN프루닝 + 실행 계획
- 프로파일런타임 근거
- 개선필요하면 재구축