DuckDB 고급 활용

DuckDB가 빛나는 분석 워크로드와 피해야 할 운영 시나리오를 구분합니다.

current 1.5, 1.4 LTS, CLI, Python, extension 버전을 운영 기준선으로 고정합니다.

in-memory, file-backed DB, ATTACH, read-only 연결, WAL, checkpoint를 정리합니다.

작은 CSV/JSON 샘플과 SQL 스크립트로 수집, Parquet 변환, profiling을 직접 실행합니다.

자동 추론과 명시 스키마, 불량 파일, JSON 추출을 분석 파이프라인으로 바꿉니다.

Parquet 직접 스캔, metadata, row group, compression, materialization 기준을 다룹니다.

glob, filename, union_by_name, 스키마 계약과 drift 감지 패턴을 정리합니다.

Hive partitioning, S3 secrets, multipart write, 작은 파일 문제를 운영 관점으로 봅니다.

Iceberg, Delta, DuckLake를 DuckDB에서 읽고 쓰는 범위와 안정성 기준을 잡습니다.

GROUP BY ALL, SELECT * EXCLUDE, PIVOT, table macro로 분석 SQL을 압축합니다.

ASOF JOIN, window, QUALIFY, sampling, 분석용 join 패턴을 정리합니다.

JSON, STRUCT, LIST, VARIANT 기준으로 semi-structured 데이터를 분석 모델로 바꿉니다.

notebook, Arrow zero-copy, Pandas/Polars replacement scan, BI 연결 습관을 다룹니다.

dbt-duckdb, MotherDuck, Ibis를 DuckDB 운영 모델에 어디까지 편입할지 판단합니다.

CTAS, persistent table, zonemap, ART index, ANALYZE를 성능 판단으로 연결합니다.

EXPLAIN, EXPLAIN ANALYZE, profiling output으로 병목을 읽는 방법입니다.

파일 레이아웃과 세션 설정을 바꿔 같은 쿼리의 plan과 실행 시간을 비교합니다.

larger-than-memory, temp directory, OOM, blocking operator, thread 제한을 다룹니다.

단일 프로세스 write 모델, read-only 공유, extension 보안, untrusted SQL 방어입니다.

로컬 노트북, CI 배치, 내부 분석 서비스별 허용/금지 설정을 표준화합니다.

DuckDB 세션 설정, S3 secret, Parquet 점검, OOM 대응, 파티션 설계 템플릿입니다.

공식 문서와 릴리스 근거를 주제별로 묶었습니다.

문서 구조, 근거, 버전 기준, 검증 명령 결과를 추적합니다.

DuckDB 릴리스와 extension 변화를 추적하는 변경 로그입니다.