Amazon S3 Tables, 모든 Apache Iceberg V3 데이터 유형 지원 시작

문제 & 배경: Iceberg V2에서는 대량 행 삭제 때 많은 삭제 파일이 생기고 JSON·지리공간 데이터와 나노초 타임스탬프를 문자열이나 정수로 우회 저장해야 해 쿼리 지연, 저장 비용, 파이프라인 복잡도가 커졌습니다.

기술 & 해결책: Iceberg V3의 삭제 벡터, 행 계보, 가변형·지리공간·나노초 타임스탬프 같은 네이티브 유형을 S3 Tables에 적용해 변경된 행만 빠르게 찾고 데이터를 원래 형태에 가깝게 저장하며, 컴팩션과 유지 관리는 자동으로 처리합니다.

교훈 & 주의점: 기존 V2 테이블은 데이터를 다시 쓰지 않고 업그레이드할 수 있지만 되돌릴 수 없으므로 모든 접근 엔진의 V3 지원 여부를 먼저 확인해야 하며, 새 데이터 유형은 Spark 4.0 기반 엔진과 Parquet 형식이 필요합니다.