Direkt zum Inhalt

Wie behebe ich Probleme mit Latenz bei Aufrufen oder Anfragen an Amazon-ECS-Aufgaben?

Lesedauer: 4 Minute
0

Ich möchte Fehler in meiner Amazon Elastic Container Service (Amazon ECS)-Anwendung beheben, die langsam auf Anfragen reagiert.

Kurzbeschreibung

Eine hohe Latenz bei Amazon-ECS-Aufgaben kann aus den folgenden Gründen auftreten:

  • Hohe CPU- oder Speicher (RAM)-Auslastung bei Aufgaben
  • Probleme mit Anwendungsabhängigkeiten, die innerhalb der Anwendung ausgeführt werden
  • Große Netzwerkdistanz zwischen Clients oder On-Premises-Zielen und ECS-Aufgaben
  • Probleme mit der Netzwerkkonnektivität, Überschreitungen
  • Drosselung von Amazon Elastic Block Store (Amazon EBS)-Volumes

Um diese Probleme zu beheben, isoliere zunächst, wo die Verzögerung auftritt, und führe dann die Lösungsschritte durch.

Lösung

Gehe wie folgt vor, um Probleme mit hoher Latenz bei ECS-Aufgaben zu beheben:

  1. Führe den folgenden Befehl aus, um die Reaktionszeit bis zum ersten Byte zu messen und nach einer langsamen DNS-Auflösung zu suchen, die zu Latenz führen kann:

    % curl -kso /dev/null -w "\n===============
    | DNS lookup: %{time_namelookup}
    | Connect: %{time_connect}| App connect: %{time_appconnect}
    | Pre-transfer: %{time_pretransfer}
    | Start transfer: %{time_starttransfer}
    | Total: %{time_total}
    | HTTP Code: %{http_code}\n===============\n" https://LOAD_BALANCER_DNS_NAME.com
    
    Example output:
    | DNS lookup: 0.035596
    | Connect: 0.063130
    | App connect: 0.159145
    | Pre-transfer: 0.159264
    | Start transfer: 0.190203
    | Total: 0.190722
    | HTTP Code: 200

    Hinweis: Ersetze LOAD_BALANCER_DNS_NAME.com durch deinen Load-Balancer-DNS-Namen. Die Ausgabe im vorherigen Beispiel erfolgt in Millisekunden-Zeitrahmen. Führe die ersten Tests innerhalb der VPC aus, um die Variablen zu reduzieren, die an verschiedenen Netzwerkpfaden beteiligt sind.

  2. Umgehe den Load Balancer. Verwende eine Aufgaben-IP-Adresse für eine bekannte Aufgabe, die ausgeführt wird, um den vorherigen curl zu steuern. Dieser Prozess hilft dabei, die Komponente zu isolieren, die Latenz verursacht.

  3. Wenn es einen Application Load Balancer gibt, überprüfe die Durchschnittsstatistik der TargetResponseTime-Metrik von Amazon CloudWatch auf Extremwerte.

    Wenn der Wert hoch ist, ist die Latenz auf die Aufgaben oder auf eine Abhängigkeit der Anwendung von externen Verbindungen zurückzuführen. Weitere Informationen findest du unter Wie behebe ich einen Anstieg der TargetResponseTime-Metrik für einen Application Load Balancer?

    Wenn es eine große Anzahl von Aufgaben gibt, aktiviere und überprüfe die Zugriffsprotokolleinträge des Application Load Balancers, um die Backend-Instances zu identifizieren.

  4. Um Probleme mit dem Application Load Balancer zu bestätigen, überprüfe die Felder request_processing_time und response_processing_time in den Protokolleinträgen auf ungewöhnlich lange Zeiträume. Weitere Informationen findest du unter Wie behebe ich Probleme mit hoher Latenz auf meinem Application Load Balancer in Elastic Load Balancing? Wenn du den curl-Befehl direkt für die Aufgaben-IP-Adresse ausführst und eine langsame Antwort erhältst, überprüfe CloudWatch Container Insights.

  5. Wenn die CPU- und Speicherauslastung im Durchschnitt unter 90 % liegt und keine Spitzen auftreten, suche nach Anwendungsabhängigkeiten, die zu Latenz führen. Zu den Abhängigkeiten gehören Aufrufe externer Ressourcen wie Amazon Simple Storage Service (Amazon S3)-Buckets, Amazon Relational Database Service (Amazon RDS)-Datenbanken oder andere Remote-Webservices.

  6. Wenn externe Aufrufe Teil des erwarteten Workflows der Anwendung sind, überprüfe mit den Anwendungsentwicklern, ob die Anwendung synchrone Aufrufe an externe Abhängigkeiten durchführt. Oder blockiere die Anwendung, bis sie Antworten auf diese Aufrufe erhält. Weitere Informationen findest du unter Asynchrone Aufrufe verwalten.

  7. Wenn du auf EC2-Container-Instances hostest, überprüfe alle Amazon-EBS-Volumes und Netzwerkschnittstellen auf Anzeichen einer Überauslastung. Weitere Informationen findest du unter Wie behebe ich Leistungsprobleme mit dem EBS-Volume auf meiner EC2-Instance? Wenn Anzeichen einer EBS-Drosselung zu erkennen sind, überprüfe und erhöhe die von EBS bereitgestellten IOPS und den Durchsatztyp. Oder verwende eine andere Option, z. B. den Instance-Speicher oder den Elastic Fabric Adapter (EFA).

    Wenn du eine Drosselung der Netzwerkschnittstelle feststellst, verwende einen größeren Instance-Typ mit mehr Netzwerkbandbreite. Oder verwende einen netzwerkoptimierten Instance-Typ, der eine größere optimierte Baseline bietet. Weitere Informationen findest du unter Warum überschreitet meine Amazon-EC2-Instance ihre Netzwerklimits, wenn meine durchschnittliche Auslastung niedrig ist?

  8. Wenn du auf AWS Fargate hostest, überprüfe die Netzwerkschnittstellenmetriken bei einem Amazon ECS-Netzwerk-Sidecar-Container. Um einen Sidecar-Container hinzuzufügen, stelle eine neue Aufgabendefinition bereit.

AWS OFFICIALAktualisiert vor 7 Monaten