내용으로 건너뛰기

Athena에서 Iceberg 테이블의 bucket() 파티션 변경이 불가능한 이유가 궁금합니다

0

안녕하세요.

현재 Athena를 이용해 S3 기반 Iceberg 테이블을 Glue Data Catalog와 함께 사용하고 있습니다. 테이블은 다음과 같이 파티셔닝 되어 있습니다

PARTITIONED BY (day(date), bucket(100, model_code))

데이터 양 증가에 따라 bucket(100)을 bucket(200)으로 변경하거나, bucket() 파티션 자체를 제거하고 싶은 상황입니다.

하지만 아래 문서에 따르면, Athena의 Iceberg 테이블은 다음과 같은 파티션 관련 DDL을 지원하지 않는다고 명시되어 있습니다: SHOW PARTITIONS ALTER TABLE ADD/DROP/RENAME PARTITION ALTER TABLE REPLACE PARTITION FIELD

해당 문서에서는 Iceberg의 Hidden Partitioning 기능이 있기 때문에, 이러한 DDL 작업이 필요 없어서 지원하지 않는다고 설명하고 있는데요,

제가 이해하기로는 Iceberg의 Partition Transforms (bucket, day, truncate 등)은 성능/비용에 영향을 주는 중요한 설계 요소로, 운영 상황에 따라 변경이 필요한 경우도 있다고 알고 있습니다.

질문을 요약하자면,

  1. Iceberg 자체는 partition spec 변경을 지원하는데, Athena에서만 이를 지원하지 않는 이유가 기술적 구현 미비인지, 아니면 설계 철학 상 의도적으로 막아놓은 것인지 궁금합니다.

  2. 향후 Athena에서도 ALTER TABLE REPLACE PARTITION FIELD와 같은 Iceberg DDL 기능을 지원할 계획이 있는지 알고 싶습니다.

질문됨 8달 전77회 조회
1개 답변
0

안녕하세요.

re:Post 는 커뮤니티로, AWS 개발팀의 의도나 계획에 대해 알고 있지 않습니다. 매뉴얼에서 확인해 보신 대로 athena-feedback@amazon.com 으로 피드백을 남겨 보시는 게 좋을 것 같습니다.

답변함 8달 전

로그인하지 않았습니다. 로그인해야 답변을 게시할 수 있습니다.

좋은 답변은 질문에 명확하게 답하고 건설적인 피드백을 제공하며 질문자의 전문적인 성장을 장려합니다.