Clever Geek Handbook

Unabhängige HttpBench für D, oder liegen die Tests von TechEmpower?

Ein einfaches Framework zum Testen von HTTP-Servern, inspiriert vom Simple Web Benchmark ( es gibt ein Diagramm für viele andere Sprachen ), das sich jedoch auf Dlang- Frameworks und -Bibliotheken konzentriert.



Es misst den erreichbaren RPS (Anforderungen pro Sekunde) in einem Klartext-Skript.



Tests wurden an verschiedenen Orten (einschließlich TechEmpower ) gesammelt oder modifiziert .



Es verwendet einen Docker- Container zum Erstellen und Hosten von Diensten und kann lokal ausgeführt werden oder einen Lasttester von einem Remote-Host verwenden.



Der Standard- Lastgenerator ist wrk und fordert Statistiken vom Kollektor an, aber hey wird auch unterstützt (verwenden Sie einfach den Schalter --tool).



Tests können ohne Docker ausgeführt werden. Sie müssen lediglich Compiler für die getesteten Sprachen und den Wrk / Hey- Bootgenerator installieren (jedoch nur unter Linux getestet).



Hinweis für io_uring-Tests:



  • Die Tests erfordern mindestens einen Linux 5.7-Kernel.
  • Bei der Ausführung mit einem normalen Benutzer können auch Probleme mit benutzerdefinierten Speicherbeschränkungen (ulimit -l) auftreten.
  • , Kernel 5.7.16. . : #189, #8.




:



  • singleCore — / ( ).
  • multiCore —






  • make build —
  • make shell —

    : .




, ( ): 



make all        # runs all tests
make single     # runs tests limited to single CPU core usage
make multi      # runs tests limited to multiple CPU cores usage


_suite/runner.d CLI-.



  • _suite/runner.d list — -
  • _suite/runner.d bench —
  • _suite/runner.d responses —
  • _suite/runner.d versions — Markdown

    _suite/runner.d -h CLI .


:



_suite/runner.d bench --type singleCore dlang rust #     dlang  rust




(. ), CLI .



:



  • , , .
  • - _suite/runner.d bench --type singleCore -r foo@192.168.0.3 --host 192.168.0.2 dlang


-r --remote , ssh. --host , CLI IP , , .



ssh , ssh ( ).



(hey) .



, , .



/



Techempower .



, .



  • (.. ..)
  • HTTP-


, , , , , .



C



. HTTP-, eventloop .



epoll io_uring. raw.



dlang



arsd-official



. http :



  • process — , .
  • threads — threadpool
  • hybrid — Linux , .


singeCore, ( ) eventloop, (.. CGI) .



. — .



during



  • raw — , , ( , ,… — )

    TBD — / io_uring, epoll Linux-.


epoll



, , . , — , during/raw



eventcore



, vibe-d. epoll linux (iocp kqueue windows MacOS).



, http , , .



  • callbacks — .
  • fibers —


hunt





lighttp



code.dlang.org, .



, .



mecca



Weka.



.



: druntime, . . , .



photon



code.dlang.org, , syscalls glibc epoll eventloop , .



nodejs http-parser ( , pico) .



vibe-core



, eventcore .



- , TCPConnection , .



, http .



vibe-d



- dlang, .



dotnet



ASP.Net Core.



, ( , , ...). .. , .



golang



fasthttp .



HTTP , .



rust



Actix :



  • actix-web —
  • actix-raw —




Single core results ()



: AMD Ryzen 7 3700X 8-Core, kernel 5.8.10

: Intel® Core(TM) i5-5300U CPU @ 2.30GHz, kernel 5.8.9

: 1Gbps through cheap gigabit switch

: for i in 8 64 128 256; do _suite/runner.d bench --type singleCore --tool wrk -b 2 -d 120 -c $i -r tomas@10.0.0.2; done
go go1.15.1
ldc2 1.23.0
rust 1.48.0-nightly
dotnet 5.0.100-rc.1.20452.10


Von einem Übersetzer . Vollversionen der Tabellen mit den Ergebnissen können im Original angezeigt werden . Da dort jedoch offensichtlich nicht alles durcheinander ist, habe ich für zwei Kategorien mehr visuelle Diagramme zur Anzahl der verarbeiteten Anforderungen in 2 Minuten (Req, RPS proportional) erstellt - vollwertige Frameworks ohne Optimierungen und alles andere, einschließlich Basisbibliotheken. Und zwei Ergebnisse - für 8 Mitarbeiter und für 256, um die Skalierbarkeit zu demonstrieren.







Und ja, TechEmpower-Tests, bei denen optimierte Versionen mit den üblichen gemischt werden, verschönern an manchen Stellen ziemlich viel.



More articles:


All Articles