Prestandatester
Clause jämfört med Erlang/OTP på en och samma maskin: samma Erlang-program, kompilerade med erlc och med clau -O2, tar tid på sina kärnor efter ett uppvärmningsanrop. Siffrorna ändras med varje optimering.
- Geometriskt medelvärde av kärntiderna för de kompilerade programmen, utan bibliotekstester, Clause -O2 mot BEAM JIT (OTP)
- 1,60× snabbare i genomsnitt
- Geometriskt medelvärde av bibliotekstesternas tider, OTP:s biblioteksmoduler kompilerade av Clause -O2 mot BEAM JIT (OTP)
- 1,39× långsammare i genomsnitt
- Kärnor där Clause är snabbare
- 38 / 44
Tider per kärna
Median av 3 körningar i millisekunder. Stapeln visar Clauses tid delad med OTP:s på en logaritmisk skala.
| Kärna | OTP JIT | Clause -O2 | Clause ÷ OTP | |
|---|---|---|---|---|
| Datagenerering | ||||
| bigint_factorialBeräknar fakulteten av 3000 med stora heltal, 330 gånger | 1 110,12 | 207,56 | 0,19× | |
| binary_appendLägger till 10 000 32-bitars heltal i en växande binary, 23 000 gånger | 1 076,22 | 803,84 | 0,75× | |
| list_of_tuplesBygger en lista med 200 000 små tupler, 260 gånger | 1 473,95 | 1 121,96 | 0,76× | |
| list_to_tupleGör om listor med 1000 element till tupler, 170 000 gånger | 1 500,47 | 1 191,70 | 0,79× | |
| map_putLägger in 2000 heltalsnycklar i en map, en i taget, 4900 gånger | 1 576,24 | 1 478,73 | 0,94× | |
| string_buildBygger 20 000 strängar av heltal och atomer, 1000 gånger | 1 031,48 | 772,52 | 0,75× | |
| Databearbetning | ||||
| binary_matchSummerar 20 000 32-bitars heltal matchade ur en binary, 49 000 gånger | 1 274,78 | 1 076,12 | 0,84× | |
| comprehensionComprehension som filtrerar och dubblar 20 000 heltal, 15 000 gånger | 1 418,04 | 664,73 | 0,47× | |
| int_to_listGör om 20 000 heltal till strängar och tillbaka, 2000 gånger | 899,69 | 410,86 | 0,46× | |
| map_foldlKör map och sedan fold över 20 000 heltal, 4500 gånger | 1 459,92 | 616,89 | 0,42× | |
| map_updateÖkar varje värde i en map med 500 nycklar, 24 000 gånger | 1 188,35 | 648,98 | 0,55× | |
| small_mapUppdaterar en liten tillståndsmap 80 miljoner gånger | 1 484,29 | 1 027,86 | 0,69× | |
| sortSorterar en lista med 20 000 slumpmässiga heltal, 600 gånger | 1 038,95 | 454,89 | 0,44× | |
| term_to_binaryKodar och avkodar en stor nästlad term, 4300 gånger | 1 427,56 | 1 060,32 | 0,74× | |
| Distribution | ||||
| data_exchange200 rundturer av en binär på 64 KB och 1 000 tupler med en annan nod, 3 gånger | 148,07 | 426,42 | 2,88× | |
| ping_pong5 000 meddelanden fram och tillbaka med en annan nod över TCP, 3 gånger | 831,18 | 1 239,78 | 1,49× | |
| reconnect20 frånkopplingar och återanslutningar till en annan nod, var och en med en rundtur, 3 gånger | 137,11 | 66,42 | 0,48× | |
| spawnStartar 500 processer efter varandra på en annan nod, 3 gånger | 91,03 | 166,03 | 1,82× | |
| Fil-I/O | ||||
| large_readLäser en fil på 16 MB i block om 64 KB, 370 gånger | 1 416,09 | 1 029,62 | 0,73× | |
| large_writeSkriver en fil på 16 MB i block om 64 KB, 200 gånger | 975,05 | 922,76 | 0,95× | |
| read_fileLäser en hel fil på 16 MB i ett anrop, 330 gånger | 1 488,38 | 1 418,65 | 0,95× | |
| read_lineLäser en textfil med 20 000 rader rad för rad, 52 gånger | 1 507,64 | 1 385,17 | 0,92× | |
| small_filesSkriver, läser tillbaka och raderar 500 små filer, 11 gånger | 1 256,45 | 1 143,67 | 0,91× | |
| Flyttal | ||||
| callsTrapetssumma av ett polynom med ett anrop per steg, 160 gånger | 1 227,88 | 487,21 | 0,40× | |
| guardsEn is_float/1-guard i en flyttalsloop med 1 miljon steg, 120 gånger | 1 173,50 | 433,07 | 0,37× | |
| limitLåter ett flyttal växa stegvis förbi 1e100, 80 gånger | 1 167,16 | 257,38 | 0,22× | |
| mandelbrotMandelbrot-iterationer över ett rutnät på 120×120, 120 gånger | 1 251,12 | 249,26 | 0,20× | |
| negateUnärt minus och float/1 i en flyttalsloop med 1 miljon steg, 70 gånger | 1 222,35 | 633,83 | 0,52× | |
| sumSummerar ett flyttal i en loop med 1 miljon steg, 200 gånger | 1 115,14 | 472,37 | 0,42× | |
| Skräpsamling | ||||
| explicit_collectTvingar fram skräpsamling med 10 000 levande tupler, 5100 gånger | 1 524,12 | 580,09 | 0,38× | |
| grow_shrinkVäxer heapen med en lista på 200 000 element och släpper den, 300 gånger | 1 052,06 | 849,05 | 0,81× | |
| long_lived_churnBehåller ett glidande fönster med 10 000 levande element bland skräp, 370 gånger | 1 308,67 | 1 088,48 | 0,83× | |
| short_processesStartar 5000 kortlivade processer som var och en skapar skräp, 69 gånger | 1 652,53 | 1 026,00 | 0,62× | |
| Bibliotek | ||||
| qlcKör qlc-transformen över 27 frågor och 3 moduler, 11 gånger | 1 858,46 | 1 685,38 | 0,91× | |
| Meddelandeöverföring | ||||
| fan_in100 processer skickar var och en 1000 meddelanden till en, 25 gånger | 1 374,31 | 277,80 | 0,20× | |
| large_messageSkickar en lista med 100 000 element till en process och tillbaka, 560 gånger | 1 075,30 | 780,68 | 0,73× | |
| ping_pongStudsar ett meddelande mellan två processer 2 miljoner gånger | 1 494,43 | 810,77 | 0,54× | |
| ringSkickar en token 3050 varv runt en ring av 1000 processer | 1 435,96 | 1 028,15 | 0,72× | |
| Loopback-sockets | ||||
| tcp_connectÖppnar 900 TCP-anslutningar via loopback och ekar 25 meddelanden på 1 KB i varje | 1 487,16 | 1 152,30 | 0,77× | |
| tcp_echoEkar 30 000 meddelanden på 1 KB över TCP via loopback | 1 574,40 | 1 274,58 | 0,81× | |
| udp_round_tripStudsar ett datagram på 1 KB 27 900 gånger över UDP via loopback | 1 504,67 | 1 234,78 | 0,82× | |
| TLS | ||||
| tls_bulkSkickar 1 024 block på 16 KB över TLS 1.3 via loopback, 3 gånger | 139,37 | 145,92 | 1,05× | |
| tls_echo5 000 TLS 1.3-ekon på 1 KB via loopback, 3 gånger | 1 018,57 | 2 052,42 | 2,01× | |
| tls_handshake50 TLS 1.3-anslutningar, var och en med full handskakning och ett eko, 3 gånger | 324,40 | 636,09 | 1,96× | |
Hela program
Verklig tid i sekunder, inklusive uppstart, median av körningarna.
| Program | OTP JIT | Clause -O2 | Clause ÷ OTP | |
|---|---|---|---|---|
| bench_datagenBygger listor, tupler, maps, binaries och stora heltal i mängd | 7,91 | 5,61 | 0,71× | |
| bench_dataprocSortering, fold, map-uppdateringar, binary-matchning och konverteringar | 10,29 | 5,97 | 0,58× | |
| bench_distRundturer, data, processtarter och återanslutningar mellan noder; OTP kör dem även över TLS | 5,67 | 4,78 | 0,84× | |
| bench_fileSkriver och läser små och stora filer, läser rader | 6,96 | 6,08 | 0,87× | |
| bench_floatFlyttalsloopar: summor, Mandelbrot, gränser, negation, guards och anrop | 7,36 | 2,57 | 0,35× | |
| bench_gcKortlivade processer, heap som växer och krymper, levande data | 5,79 | 3,60 | 0,62× | |
| bench_libraryqlc:s parse transform vid körning, som qlc:q/1 använder den | 2,23 | 1,86 | 0,83× | |
| bench_msgPing-pong, fan-in, processring och kopiering av stora meddelanden | 5,63 | 3,00 | 0,53× | |
| bench_socketTCP-eko, TCP-anslutningar och UDP-rundturer via loopback | 6,26 | 4,92 | 0,79× | |
| bench_sslTLS 1.3-eko, handskakningar och bulköverföring via loopback | 2,21 | 3,87 | 1,75× |
Utveckling
Geometriskt medelvärde av Clauses tid delad med OTP:s för varje dag med registrerade körningar. Körningar före 2026-10-21 var inte låsta till en processoruppsättning, så en del av förändringen den dagen kommer från låsningen.
| Datum | Commit | Clause ÷ OTP |
|---|---|---|
| 2026-10-12 | a7bc0c9b | 20,2× |
| 2026-10-13 | 8a244d9c | 16,9× |
| 2026-10-14 | 55f42a9d | 16,9× |
| 2026-10-15 | 6ed3851c | 2,73× |
| 2026-10-16 | 97295c84 | 1,95× |
| 2026-10-17 | a8c3f8f6 | 1,38× |
| 2026-10-18 | 336caea7 | 1,41× |
| 2026-10-20 | 7d7a2f2e | 1,00× |
| 2026-10-21 | 71ec52f8 | 0,78× |
| 2026-10-23 | dea68508 | 0,69× |
| 2026-10-24 | af105043 | 0,65× |
| 2026-10-26 | d6eafa72 | 0,71× |
| 2026-10-30 | f4e5f3e0 | 0,67× |
| 2026-11-01 | 3265232a | 0,67× |
Storlek på körbara filer
Storlek i megabyte på testprogrammen som Clause bygger dem på varje optimeringsnivå.
| Program | -O0 | -O2 | -O2 --lto |
|---|---|---|---|
| bench_datagen | 10,22 MB | 10,14 MB | 10,14 MB |
| bench_dataproc | 10,74 MB | 10,33 MB | 10,33 MB |
| bench_dist | 39,41 MB | 24,51 MB | 24,52 MB |
| bench_file | 30,25 MB | 18,09 MB | 18,07 MB |
| bench_float | 10,30 MB | 10,17 MB | 10,17 MB |
| bench_gc | 10,21 MB | 10,13 MB | 10,14 MB |
| bench_library | 10,56 MB | 10,26 MB | 10,27 MB |
| bench_msg | 10,23 MB | 10,14 MB | 10,14 MB |
| bench_socket | 30,33 MB | 18,13 MB | 18,10 MB |
| bench_ssl | 43,62 MB | 26,76 MB | 26,76 MB |
Storlekar med -O2 för de senaste 6 benchmarkkörningarna, äldst först, en Clause-commit per körning. Tabellen nedan lägger till summan för alla bench_*-program och storleken på kompilatorn clau.
- 2026-10-2171ec52f8
- 2026-10-23dea68508
- 2026-10-24af105043
- 2026-10-26d6eafa72
- 2026-10-30f4e5f3e0
- 2026-11-013265232a
| Datum | Commit | Alla bench_*-program | clau |
|---|---|---|---|
| 2026-10-21 | 71ec52f8 | 38,78 MB | 59,54 MB |
| 2026-10-23 | dea68508 | 38,79 MB | 59,54 MB |
| 2026-10-24 | af105043 | 38,81 MB | 59,65 MB |
| 2026-10-26 | d6eafa72 | 62,21 MB | 59,98 MB |
| 2026-10-30 | f4e5f3e0 | 70,63 MB | 60,75 MB |
| 2026-11-01 | 3265232a | 148,67 MB | 60,82 MB |
Testmiljö
- Maskin
- Intel64 Family 6 Model 183 Stepping 1, GenuineIntel, 32 logiska processorer, Windows 11 (10.0.26200)
- Processoruppsättning
- Prestandakärnor 0-15, 16 av 32 logiska processorer
- Erlang/OTP
- 29, ERTS 17.1
- Clause-commit
- 3265232a
- Körning
- 2026-11-01
OTP och Clause körs på samma processorer: varje benchmarkprogram är låst till processorns prestandakärnor, så på en hybridprocessor hamnar ingen kärna (kernel) på en långsammare effektivitetskärna. Båda håller en schemaläggare aktiv per processor i uppsättningen, obunden inom den.
Kör prestandatesterna själv med make benchmark eller make-benchmark.bat i Clause-repositoryt; anteckningarna om prestandatester beskriver programmen och alternativen. Anteckningar om prestandatester
Clause