Quando executo minha consulta do Amazon Athena em uma tabela particionada, a consulta falha com o erro "HIVE_PARTITION_SCHEMA_MISMATCH".
Breve descrição
Você pode receber o erro “HIVE_PARTITION_SCHEMA_MISMATCH” nos seguintes cenários:
- O esquema de tabela das partições não é compatível com o esquema de tabela.
- O formato de dados da tabela não permite o tipo de atualização que você tentou.
Para obter mais informações, consulte Atualizações em tabelas com partições.
Resolução
Configurar o crawler do AWS Glue para atualizar o esquema de partição
Se você usou um rastreador do AWS Glue para criar a tabela, configure o rastreador do AWS Glue para atualizar o esquema da partição.
Conclua as seguintes etapas:
- Abra o console do AWS Glue.
- No painel de navegação, escolha Crawlers.
- Selecione o crawler que você deseja configurar.
- Escolha Ações e depois Editar crawler.
- Escolha Avançar e continue escolhendo Avançar até navegar até a página Escolher a saída do crawler.
- Expanda Opções de configuração.
- Selecione Atualizar todas as partições novas e existentes com metadados da tabela.
- Escolha Avançar e depois Concluir para salvar a configuração do crawler.
- Na página Crawlers, selecione o crawler.
- Escolha Executar crawler. Quando você executa o crawler, as partições herdam o esquema da tabela.
Use uma instrução DDL do Athena para eliminar a partição afetada e recriar a partição descartada
Se você criou a tabela manualmente, use uma instrução da linguagem de definição de dados (DDL) do Athena para eliminar a partição afetada e recriá-la.
Conclua as seguintes etapas:
- Abra o console do Amazon Athena.
- Na guia Editor de consultas, execute o comando ALTER TABLE DROP PARTITION para eliminar a partição afetada.
- Execute comando ALTER TABLE ADD PARTITION para recriar a partição descartada.
Observação: se sua tabela usa partições compatíveis com o Hive, você poderá executar o comando MSCK REPAIR TABLE para recriar a partição descartada.
Informações relacionadas
Sincronizar o esquema de partição para evitar “HIVE_PARTITION_SCHEMA_MISMATCH”
Setting crawler configuration options