¿Cómo puedo resolver el error “Failed to start the job flow due to an internal error” en Amazon EMR?

Resolución

Para resolver el error Failed to start the job flow due to an internal error en Amazon EMR, vuelve a lanzar el clúster. Si el error sigue apareciendo, sigue estos pasos.

Comprueba los permisos para el rol de servicio de Amazon EMR

Asegúrate de que el rol de servicio EMR_DefaultRole_V2 de Amazon EMR tenga permisos para usar las claves de AWS Key Management Service (AWS KMS) especificadas. Para lanzar clústeres de Amazon EMR, el rol de servicio de Amazon EMR debe tener los siguientes permisos:

{  "Version": "2012-10-17",
  "Statement": [{
    "Sid": "EmrDiskEncryptionPolicy",
    "Effect": "Allow",
    "Action": [
      "kms:Encrypt",
      "kms:Decrypt",
      "kms:ReEncrypt*",
      "kms:CreateGrant",
      "kms:GenerateDataKeyWithoutPlaintext",
      "kms:DescribeKey"
    ],
    "Resource": [
      "arn:aws:kms:us-west-2:<account-id>:key/<key-id>"
    ]
  }]
}

Si se produce un error en las instancias de clúster de Amazon EMR, es posible que recibas errores Connection timed out.

Para solucionar los errores Connection timed out, sigue estos pasos:

1. Abre la consola de Amazon Elastic Compute Cloud (Amazon EC2).
2. Selecciona el nodo de Amazon EC2 terminado.
   Nota: El nodo terminado estará disponible durante 1 o 2 horas en la consola de Amazon EC2.
3. En la lista desplegable Acciones, selecciona Supervisar.
4. Selecciona Solucionar problemas y, a continuación, selecciona Obtener registro del sistema.
5. Revisa el registro del sistema para determinar el problema.

Comprobación de las rutas de subred de Amazon VPC

Asegúrate de que las rutas de subred de Amazon Virtual Private Cloud (Amazon VPC) estén configuradas correctamente para el origen de datos que utiliza tu clúster. Para obtener más información, consulta Configuración de una VPC para alojar clústeres de Amazon EMR.

Comprobación de los grupos de seguridad

Asegúrate de que los grupos de seguridad principales, centrales y de tareas estén configurados correctamente para la subred. Para obtener más información, consulta Trabajo con grupos de seguridad administrados por Amazon EMR. Además, debes permitir todas las acciones necesarias en los roles predeterminados de Amazon EMR y en el rol del perfil de instancia. Después de configurar las rutas de subred, los grupos de seguridad y los roles de Amazon VPC, lanza un nuevo clúster.

Información relacionada

Configuración de redes en una VPC para Amazon EMR