Heim> Java> javaLernprogramm> Hauptteil

Spring Boot-Anwendung auf AWS Lambda – Teil Die Messung von Kalt- und Warmstarts erfolgt mit der Spring Cloud-Funktion

WBOY
Freigeben: 2024-08-12 22:38:32
Original
895 Leute haben es durchsucht

Spring Boot pplication on AWS Lambda - Part Measuring cold and warm starts with Spring Cloud Function

Einführung

In Teil 8 stellen wir das Konzept hinter der Spring Cloud-Funktion vor und in Teil 9 zeigen wir, wie man AWS Lambda mit Spring Cloud Function unter Verwendung von Java 21 und Spring Boot 3.2 entwickelt. In diesem Artikel der Serie messen wir die Kalt- und Warmstartzeit, einschließlich der Aktivierung von SnapStart für die Lambda-Funktion, aber auch der Anwendung verschiedener Vorbereitungstechniken wie der Vorbereitung des DynamoDB-Aufrufs und der Vorbereitung (Proxy) der gesamten API-Gateway-Anfrage, ohne das Netzwerk zu durchlaufen . Wir verwenden die Beispielanwendung Spring Boot 3.2 für unsere Messungen und verwenden für alle Lambda-Funktionen JAVA_TOOL_OPTIONS: „-XX:+TieredCompilation -XX:TieredStopAtLevel=1“ und geben ihnen Lambda 1024 MB Speicher.

Messen von Kaltstarts und Warmzeit mit Spring Cloud Function und Verwendung von Java 21 und Spring Boot 3.2

Beginnen wir mit der Erklärung, wie man AWS SnapStart für die Lambda-Funktion aktiviert, da diese (mit der Grundierung oben) das größte Optimierungspotenzial für die Lambda-Leistung (insbesondere Kaltstartzeiten) bietet. Es ist nur eine Frage der Konfiguration:

SnapStart: ApplyOn: PublishedVersions
Nach dem Login kopieren

wird in den Lambda-Funktionseigenschaften oder im globalen Funktionsabschnitt der SAM-Vorlage angewendet. Für unseren Anwendungsfall möchte ich näher auf die Verwendung verschiedener Priming-Techniken zusätzlich zu SnpaStart eingehen. Die Ideen hinter dem Priming habe ich in meinem Artikel „AWS Lambda SnapStart – Messung von Priming, End-to-End-Latenz und Bereitstellungszeit“ erläutert

1) Den Code zum Vorbereiten der DynamoDB-Anfrage finden Sie hier.

Diese Klasse implementiert zusätzlich die Schnittstelle import org.crac.

Resourcedes CraC-Projekts.

Mit dieser Anrufung


Core.getGlobalContext().register(this);
Nach dem Login kopieren
GetProductByIdWithDynamoDBRequestPrimingHandler-Klasse registriert sich selbst als CRaC-Ressource.

Wir bereiten den DynamoDB-Aufruf zusätzlich vor, indem wir die Methode

beforeCheckpointaus der CRaC-API implementieren.

      @Override       public void beforeCheckpoint(org.crac.Context context) throws Exception {              productDao.getProduct("0");       }
Nach dem Login kopieren
die wir während der Bereitstellungsphase der Lambda-Funktion aufrufen und bevor der Firecracker-MicroVM-Snapshot erstellt wird.

2) Den Code zum Vorbereiten der gesamten API-Gateway-Anfrage finden Sie hier.

Diese Klasse implementiert außerdem zusätzlich die Schnittstelle import org.crac.

Resourcewie im obigen Beispiel.Wir werden die hässliche Technik wiederverwenden, die ich in meinem Artikel AWS Lambda SnapStart – Teil 6 Priming the request invocation for Java 11 and Micronaut, Quarkus and Spring Boot Frameworks beschrieben habe. Ich empfehle nicht, diese Technik in der Produktion zu verwenden, aber sie zeigt die weiteren Möglichkeiten zur Reduzierung des Kaltstarts durch Priming der gesamten API-Gateway-Anfrage durch Vorladen der Zuordnung zwischen Spring Boot- und Spring Cloud-Funktionsmodellen und Lambda-Modell, das auch DynamoDB ausführt Aufrufvorbereitung.

Die API-Gateway-Anfragekonstruktion der /products/{id} mit der ID gleich 0 sieht folgendermaßen aus:


     private static String getAPIGatewayRequestMultiLine () {              return """                         {              "resource": "/products/{id}",              "path": "/products/0",              "httpMethod": "GET",              "pathParameters": {              "id": "0"              },              "requestContext": {              "identity": {        "apiKey": "blabla"        }              }              }        """;       }
Nach dem Login kopieren
Der

beforeCheckpoint, wenn die gesamte API-Gateway-Anfrage vorbereitet (Proxy) wird, ohne das Netzwerk zu durchlaufen, mithilfe der Spring Cloud Function-KlasseFunctionInvoker, die ihre handleRequest-Methode aufruft, indem sie den Eingabestrom der oben aufgebauten API-Gateway-JSON-Anfrage wie folgt übergibt:

@Override public void beforeCheckpoint(org.crac.Context context) throws Exception {              new FunctionInvoker().handleRequest( new ByteArrayInputStream(getAPIGatewayRequestMultiLine(). getBytes(StandardCharsets.UTF_8)), new ByteArrayOutputStream(), new MockLambdaContext()); }
Nach dem Login kopieren
Die Ergebnisse des folgenden Experiments basierten auf der Reproduktion von mehr als 100 Kalt- und etwa 100.000 Warmstarts mit Lambda-Funktion mit 1024 MB Speichereinstellung für die Dauer von 1 Stunde. Dafür habe ich das Lasttest-Tool verwendet, aber Sie können jedes beliebige Tool verwenden, z. B. Serverless-Artillery oder Postman.

Ich habe alle diese Experimente mit 4 verschiedenen Szenarien durchgeführt :

1) Kein SnapStart aktiviert

Verwenden Sie in template.yaml die folgende Konfiguration:


Handler: org.springframework.cloud.function.adapter.aws.FunctionInvoker::handleRequest #SnapStart: #ApplyOn: PublishedVersions
Nach dem Login kopieren
und wir müssen die Lambda-Funktion mit dem Namen GetProductByIdWithSpringBoot32SCF aufrufen, die der Java-Klasse GetProductByIdHandler Lambda Handler zugeordnet ist.

2) SnapStart aktiviert, aber keine Grundierung angewendet

Verwenden Sie in template.yaml die folgende Konfiguration:


Handler: org.springframework.cloud.function.adapter.aws.FunctionInvoker::handleRequest SnapStart: ApplyOn: PublishedVersions
Nach dem Login kopieren
und wir müssen dieselbe Lambda-Funktion mit dem Namen GetProductByIdWithSpringBoot32SCF aufrufen, die der Java-Klasse GetProductByIdHandler Lambda Handler zugeordnet ist.

3) SnapStart aktiviert mit DynamoDB-Aufrufvorbereitung

Verwenden Sie in template.yaml die folgende Konfiguration:


Handler: org.springframework.cloud.function.adapter.aws.FunctionInvoker::handleRequest SnapStart: ApplyOn: PublishedVersions
Nach dem Login kopieren
und wir müssen die Lambda-Funktion mit dem Namen GetProductByIdWithSpringBoot32SCFAndDynamoDBRequestPriming aufrufen, die der Java-Klasse GetProductByIdWithDynamoDBRequestPrimingHandler Lambda Handler zugeordnet ist.

4) SnapStart aktiviert mit API-Gateway-Anforderungsaufruf-Priming/Proxying

Verwenden Sie in template.yaml die folgende Konfiguration:


Handler: org.springframework.cloud.function.adapter.aws.FunctionInvoker::handleRequest SnapStart: ApplyOn: PublishedVersions
Nach dem Login kopieren

and we need to invoke Lambda function with name
GetProductByIdWithSpringBoot32SCFAndWebRequestPriming which is mapped to the GetProductByIdWithWebRequestPrimingHandler Lambda Handler Java class.

Abbreviationcis for the cold start andwis for the warm start.

Cold (c) and warm (w) start time in ms:

Scenario Number c p50 c p75 c p90 c p99 c p99.9 c max w p50 w p75 w p90 w p99 w p99.9 w max
No SnapStart enabled 4768.34 4850.11 4967.86 5248.61 5811.92 5813.31 7.16 8.13 9.53 21.75 62.00 1367.52
SnapStart enabled but no priming applied 2006.60 2065.61 2180.17 2604.69 2662.60 2663.54 7.45 8.40 9.92 23.09 1354.50 1496.46
SnapStart enabled with DynamoDB invocation priming 1181.40 1263.23 1384.90 1533.54 1661.20 1662.17 7.57 8.73 10.83 23.83 492.37 646.18
SnapStart enabled with API Gateway request invocation priming 855.45 953.91 1107.10 1339.97 1354.78 1355.21 8.00 9.53 12.09 26.31 163.26 547.28

Conclusion

By enabling SnapStart on the Lambda function alone, it reduces the cold start time of the Lambda function significantly. By additionally using DynamoDB invocation priming we are be able to achieve cold starts only slightly higher than cold starts described in my article AWS SnapStart -Measuring cold and warm starts with Java 21 using different memory settings where we measured cold and warm starts for the pure Lambda function without the usage of any frameworks including 1024MB memory setting like in our scenario.

Comparing the cold and warm start times we measured with AWS Serverless Java Container in the article Measuring cold and warm starts with AWS Serverless Java Container and Measuring cold and warm starts with AWS Lambda Web Adapter we observe that Spring Cloud Function offers higher cold start times than AWS Lambda Web Adapter but quite comparable cold start times to AWS Serverless Java Container (results vary slightly depending on the percentiles). In terms of warm start/execution times all 3 approaches have quite comparable results when especially looking into the percentiles below 99.9.

Das obige ist der detaillierte Inhalt vonSpring Boot-Anwendung auf AWS Lambda – Teil Die Messung von Kalt- und Warmstarts erfolgt mit der Spring Cloud-Funktion. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Quelle:dev.to
Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn
Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage
Über uns Haftungsausschluss Sitemap
Chinesische PHP-Website:Online-PHP-Schulung für das Gemeinwohl,Helfen Sie PHP-Lernenden, sich schnell weiterzuentwickeln!