1 Risposta
- Più recenti
- Maggior numero di voti
- Maggior numero di commenti
0
EMR cluster YARN memory is defined as per the configuration defined here. Instance typer5.8xlarge
has 253952
MB defined in yarn.nodemanager.resource.memory-mb
( considering HBASE isn't installed in the cluster), so the cluster's YARN memory becomes 253952 * 6 MB ( 4 core and 2 task ).
This is to kept in such a way that there are some resources left for the OS and other processes.
You can tune the parameter in the cluster using EMR reconfiguration if you wish but in general tuning this is not recommended.
For more YARN cluster, consider to use EMR scaling.
con risposta 13 giorni fa
Contenuto pertinente
- AWS UFFICIALEAggiornata un anno fa
- AWS UFFICIALEAggiornata 2 anni fa
- AWS UFFICIALEAggiornata un anno fa
- AWS UFFICIALEAggiornata un anno fa