Clause

Бенчмарки

Clause порівняно з Erlang/OTP на одній машині: ті самі програми Erlang, скомпільовані erlc і clau -O2, вимірюють час своїх ядер після розігрівального виклику. Ці числа змінюються з кожною оптимізацією.

Середнє геометричне часу ядер скомпільованих програм без тестів бібліотек, Clause -O2 порівняно з BEAM JIT (OTP)
1,60× швидше в середньому
Середнє геометричне часу тестів бібліотек, модулі бібліотек OTP скомпільовані Clause -O2 порівняно з BEAM JIT (OTP)
1,39× повільніше в середньому
Ядра, на яких Clause швидший
38 / 44

Час ядер

Медіана 3 запусків у мілісекундах. Смуга показує відношення часу Clause до часу OTP у логарифмічній шкалі.

Clause швидшийOTP швидший🔺 Розкид запусків перевищив половину медіани.
ЯдроOTP JITClause -O2Clause ÷ OTP
Генерування даних
bigint_factorialОбчислює факторіал 3000 на великих цілих, 330 разів1 110,12207,560,19×
binary_appendДописує 10 000 32-бітових цілих до зростаючого binary, 23 000 разів1 076,22803,840,75×
list_of_tuplesБудує список із 200 000 малих кортежів, 260 разів1 473,951 121,960,76×
list_to_tupleПеретворює списки з 1000 елементів на кортежі, 170 000 разів1 500,471 191,700,79×
map_putДодає 2000 цілих ключів до map по одному, 4900 разів1 576,241 478,730,94×
string_buildБудує 20 000 рядків із цілих чисел і атомів, 1000 разів1 031,48772,520,75×
Обробка даних
binary_matchСумує 20 000 32-бітових цілих, зіставлених із binary, 49 000 разів1 274,781 076,120,84×
comprehensionComprehension, що фільтрує й подвоює 20 000 цілих, 15 000 разів1 418,04664,730,47×
int_to_listПеретворює 20 000 цілих на рядки й назад, 2000 разів899,69410,860,46×
map_foldlЗастосовує map, потім fold до 20 000 цілих, 4500 разів1 459,92616,890,42×
map_updateЗбільшує кожне значення map із 500 ключами, 24 000 разів1 188,35648,980,55×
small_mapОновлює малий map стану 80 мільйонів разів1 484,291 027,860,69×
sortСортує список із 20 000 випадкових цілих, 600 разів1 038,95454,890,44×
term_to_binaryКодує й декодує великий вкладений терм, 4300 разів1 427,561 060,320,74×
Розподілене виконання
data_exchange200 обмінів бінарником на 64 КБ і 1 000 кортежів з іншим вузлом, 3 рази148,07426,422,88×
ping_pong5 000 обмінів повідомленням з іншим вузлом через TCP, 3 рази831,181 239,781,49×
reconnect20 від'єднань і повторних з'єднань з іншим вузлом, кожне з обміном повідомленням, 3 рази137,1166,420,48×
spawnЗапускає 500 процесів один за одним на іншому вузлі, 3 рази91,03166,031,82×
Файловий ввід-вивід
large_readЧитає файл на 16 МБ блоками по 64 КБ, 370 разів1 416,091 029,620,73×
large_writeЗаписує файл на 16 МБ блоками по 64 КБ, 200 разів975,05922,760,95×
read_fileЧитає цілий файл на 16 МБ одним викликом, 330 разів1 488,381 418,650,95×
read_lineЧитає текстовий файл із 20 000 рядків порядково, 52 рази1 507,641 385,170,92×
small_filesЗаписує, читає й видаляє 500 малих файлів, 11 разів1 256,451 143,670,91×
Числа з рухомою комою
callsСума трапецій для многочлена, один виклик на крок, 160 разів1 227,88487,210,40×
guardsGuard is_float/1 у циклі з float на 1 мільйон кроків, 120 разів1 173,50433,070,37×
limitНарощує float крок за кроком понад 1e100, 80 разів1 167,16257,380,22×
mandelbrotІтерації Мандельброта на сітці 120×120, 120 разів1 251,12249,260,20×
negateУнарний мінус і float/1 у циклі з float на 1 мільйон кроків, 70 разів1 222,35633,830,52×
sumПідсумовує float у циклі на 1 мільйон кроків, 200 разів1 115,14472,370,42×
Збирання сміття
explicit_collectПримусово збирає сміття з 10 000 живими кортежами, 5100 разів1 524,12580,090,38×
grow_shrinkНарощує heap списком із 200 000 елементів, потім відкидає його, 300 разів1 052,06849,050,81×
long_lived_churnТримає ковзне вікно з 10 000 живих елементів серед сміття, 370 разів1 308,671 088,480,83×
short_processesЗапускає 5000 короткоживучих процесів, кожен створює сміття, 69 разів1 652,531 026,000,62×
Бібліотеки
qlcВиконує перетворення qlc над 27 запитами й 3 модулями, 11 разів1 858,461 685,380,91×
Обмін повідомленнями
fan_in100 процесів надсилають по 1000 повідомлень одному, 25 разів1 374,31277,800,20×
large_messageНадсилає список із 100 000 елементів іншому процесу й назад, 560 разів1 075,30780,680,73×
ping_pongПерекидає одне повідомлення між двома процесами 2 мільйони разів1 494,43810,770,54×
ringПередає токен 3050 разів кільцем із 1000 процесів1 435,961 028,150,72×
Сокети через loopback
tcp_connectВідкриває 900 TCP-з'єднань через loopback, у кожному луна 25 повідомлень по 1 КБ1 487,161 152,300,77×
tcp_echoВідбиває луною 30 000 повідомлень по 1 КБ через TCP на loopback1 574,401 274,580,81×
udp_round_tripПерекидає датаграму 1 КБ 27 900 разів через UDP на loopback1 504,671 234,780,82×
TLS
tls_bulkНадсилає 1 024 блоки по 16 КБ через TLS 1.3 на loopback, 3 рази139,37145,921,05×
tls_echo5 000 відлунь TLS 1.3 по 1 КБ через loopback, 3 рази1 018,572 052,422,01×
tls_handshake50 з'єднань TLS 1.3, кожне з повним рукостисканням і одним відлунням, 3 рази324,40636,091,96×

Цілі програми

Реальний час у секундах разом із запуском, медіана запусків.

ПрограмаOTP JITClause -O2Clause ÷ OTP
bench_datagenМасово будує списки, кортежі, maps, binaries і великі цілі7,915,610,71×
bench_dataprocСортування, fold, оновлення map, зіставлення binary, перетворення10,295,970,58×
bench_distОбміни, дані, віддалений запуск процесів і повторні з'єднання між вузлами; OTP виконує їх і через TLS5,674,780,84×
bench_fileЗапис і читання малих і великих файлів, читання рядків6,966,080,87×
bench_floatЦикли з float: суми, Мандельброт, межі, заперечення, guards і виклики7,362,570,35×
bench_gcКороткоживучі процеси, зростання й стискання heap, живі дані5,793,600,62×
bench_libraryParse transform qlc під час виконання, як її використовує qlc:q/12,231,860,83×
bench_msgПінг-понг, fan-in, кільце процесів і копіювання великих повідомлень5,633,000,53×
bench_socketTCP-луна, TCP-з'єднання та обміни UDP через loopback6,264,920,79×
bench_sslВідлуння, рукостискання й потокова передача TLS 1.3 через loopback2,213,871,75×

Поступ

Середнє геометричне відношення часу Clause до часу OTP за кожен день записаних запусків. Запуски до 2026-10-21 не були прив'язані до набору процесорів, тож частина зміни того дня походить від прив'язки.

ДатаКомітClause ÷ OTP
2026-10-12a7bc0c9b20,2×
2026-10-138a244d9c16,9×
2026-10-1455f42a9d16,9×
2026-10-156ed3851c2,73×
2026-10-1697295c841,95×
2026-10-17a8c3f8f61,38×
2026-10-18336caea71,41×
2026-10-207d7a2f2e1,00×
2026-10-2171ec52f80,78×
2026-10-23dea685080,69×
2026-10-24af1050430,65×
2026-10-26d6eafa720,71×
2026-10-30f4e5f3e00,67×
2026-11-013265232a0,67×

Розмір виконуваних файлів

Розмір тестових програм у мегабайтах, зібраних Clause на кожному рівні оптимізації.

Програма-O0-O2-O2 --lto
bench_datagen10,22 МБ10,14 МБ10,14 МБ
bench_dataproc10,74 МБ10,33 МБ10,33 МБ
bench_dist39,41 МБ24,51 МБ24,52 МБ
bench_file30,25 МБ18,09 МБ18,07 МБ
bench_float10,30 МБ10,17 МБ10,17 МБ
bench_gc10,21 МБ10,13 МБ10,14 МБ
bench_library10,56 МБ10,26 МБ10,27 МБ
bench_msg10,23 МБ10,14 МБ10,14 МБ
bench_socket30,33 МБ18,13 МБ18,10 МБ
bench_ssl43,62 МБ26,76 МБ26,76 МБ

Розміри з -O2 для останніх 6 запусків бенчмарків, від найстарішого, по одному коміту Clause на запуск. Таблиця нижче додає сумарний розмір усіх програм bench_* і розмір компілятора clau.

0246810121416182022242628 МБbench_datagen, 2026-10-21 71ec52f8: 6,32 МБbench_datagen, 2026-10-23 dea68508: 6,33 МБbench_datagen, 2026-10-24 af105043: 6,33 МБbench_datagen, 2026-10-26 d6eafa72: 8,55 МБbench_datagen, 2026-10-30 f4e5f3e0: 9,82 МБbench_datagen, 2026-11-01 3265232a: 10,14 МБ10.14bench_datagenbench_dataproc, 2026-10-21 71ec52f8: 6,64 МБbench_dataproc, 2026-10-23 dea68508: 6,65 МБbench_dataproc, 2026-10-24 af105043: 6,65 МБbench_dataproc, 2026-10-26 d6eafa72: 8,74 МБbench_dataproc, 2026-10-30 f4e5f3e0: 10,01 МБbench_dataproc, 2026-11-01 3265232a: 10,33 МБ10.33bench_dataprocbench_dist, 2026-11-01 3265232a: 24,51 МБ24.51bench_distbench_file, 2026-10-21 71ec52f8: 6,75 МБbench_file, 2026-10-23 dea68508: 6,75 МБbench_file, 2026-10-24 af105043: 6,75 МБbench_file, 2026-10-26 d6eafa72: 9,20 МБbench_file, 2026-10-30 f4e5f3e0: 10,59 МБbench_file, 2026-11-01 3265232a: 18,09 МБ18.09bench_filebench_float, 2026-11-01 3265232a: 10,17 МБ10.17bench_floatbench_gc, 2026-10-21 71ec52f8: 6,32 МБbench_gc, 2026-10-23 dea68508: 6,32 МБbench_gc, 2026-10-24 af105043: 6,32 МБbench_gc, 2026-10-26 d6eafa72: 8,54 МБbench_gc, 2026-10-30 f4e5f3e0: 9,81 МБbench_gc, 2026-11-01 3265232a: 10,13 МБ10.13bench_gcbench_library, 2026-10-26 d6eafa72: 9,30 МБbench_library, 2026-10-30 f4e5f3e0: 9,94 МБbench_library, 2026-11-01 3265232a: 10,26 МБ10.26bench_librarybench_msg, 2026-10-21 71ec52f8: 6,32 МБbench_msg, 2026-10-23 dea68508: 6,33 МБbench_msg, 2026-10-24 af105043: 6,33 МБbench_msg, 2026-10-26 d6eafa72: 8,55 МБbench_msg, 2026-10-30 f4e5f3e0: 9,82 МБbench_msg, 2026-11-01 3265232a: 10,14 МБ10.14bench_msgbench_socket, 2026-10-21 71ec52f8: 6,42 МБbench_socket, 2026-10-23 dea68508: 6,43 МБbench_socket, 2026-10-24 af105043: 6,43 МБbench_socket, 2026-10-26 d6eafa72: 9,33 МБbench_socket, 2026-10-30 f4e5f3e0: 10,64 МБbench_socket, 2026-11-01 3265232a: 18,13 МБ18.13bench_socketbench_ssl, 2026-11-01 3265232a: 26,76 МБ26.76bench_ssl
  • 2026-10-2171ec52f8
  • 2026-10-23dea68508
  • 2026-10-24af105043
  • 2026-10-26d6eafa72
  • 2026-10-30f4e5f3e0
  • 2026-11-013265232a
ДатаКомітУсі програми bench_*clau
2026-10-2171ec52f838,78 МБ59,54 МБ
2026-10-23dea6850838,79 МБ59,54 МБ
2026-10-24af10504338,81 МБ59,65 МБ
2026-10-26d6eafa7262,21 МБ59,98 МБ
2026-10-30f4e5f3e070,63 МБ60,75 МБ
2026-11-013265232a148,67 МБ60,82 МБ

Конфігурація

Машина
Intel64 Family 6 Model 183 Stepping 1, GenuineIntel, Логічних процесорів: 32, Windows 11 (10.0.26200)
Набір процесорів
Продуктивні ядра 0-15, 16 з 32 логічних процесорів
Erlang/OTP
29, ERTS 17.1
Коміт Clause
3265232a
Запуск
2026-11-01

OTP і Clause працюють на тих самих процесорах: кожну програму бенчмарку прив'язано до продуктивних ядер процесора, тож на гібридному процесорі жодне ядро бенчмарку (kernel) не потрапляє на повільніше енергоефективне ядро. Обидва тримають активним один планувальник на кожен процесор набору, не прив'язуючи його до конкретного процесора в межах набору.

Щоб запустити бенчмарки самостійно, виконайте make benchmark або make-benchmark.bat у репозиторії Clause; нотатки про бенчмарки описують програми та параметри. Нотатки про бенчмарки