Skip to content

OCaml Performance Numbers

Emilio Jesús Gallego Arias edited this page Sep 22, 2020 · 6 revisions

This page is meant to collect some miscellaneous benchmarks, best fit uses "overhead=200":

4.07.1 vs 4.11.1:
┌─────────────────────────────┬──────────────────────────┬──────────────────────────────────────────────┬──────────────────────────────────────────────┬────────────────────────────────┬───────────────────┐
│                             │      user time [s]       │                  CPU cycles                  │               CPU instructions               │     max resident mem [KB]      │    mem faults     │
│                             │                          │                                              │                                              │                                │                   │
│                package_name │     NEW     OLD  PDIFF   │               NEW               OLD  PDIFF   │               NEW               OLD  PDIFF   │        NEW        OLD  PDIFF   │  NEW  OLD PDIFF   │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fourcolor │ 2219.53 2521.57 -11.98 % │     6188352401580     7018881497705 -11.83 % │    12570826950155    11446962364839  +9.82 % │     819672     774980  +5.77 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│ coq-rewriter-perf-SuperFast │ 1007.96 1057.93  -4.72 % │     2804145845820     2941994213577  -4.69 % │     4626204295813     4629296786612  -0.07 % │    1070104    1070760  -0.06 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-engine-bench-lite │  367.42  382.39  -3.91 % │     1032929756316     1075374563874  -3.95 % │     1760988596378     1837850703519  -4.18 % │    3294368    3508672  -6.11 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-rewriter │  593.12  611.01  -2.93 % │     1646095524284     1695075682115  -2.89 % │     2597286055082     2583778137837  +0.52 % │    1049640    1036416  +1.28 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-fiat-parsers │  630.43  644.30  -2.15 % │     1764748168865     1806067063580  -2.29 % │     2908550025100     2718213247620  +7.00 % │    3373196    2997960 +12.52 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-unimath │ 3919.63 3989.04  -1.74 % │    10898395420607    11099620651127  -1.81 % │    21093424472985    21162644041489  -0.33 % │    1026212    1113256  -7.82 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-bedrock2 │  217.20  220.11  -1.32 % │      601861572804      608365035725  -1.07 % │     1013857394019     1003205178221  +1.06 % │    1087880    1087500  +0.03 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-coqutil │   58.82   59.57  -1.26 % │      162808378553      165334755466  -1.53 % │      211647767225      204977885884  +3.25 % │     509512     528856  -3.66 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-fiat-crypto │ 4894.45 4953.55  -1.19 % │    13595520117501    13747186151354  -1.10 % │    24526173681941    23634361532446  +3.77 % │    2147396    2325156  -7.65 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│  coq-performance-tests-lite │  538.64  545.08  -1.18 % │     1506723766518     1523763571503  -1.12 % │     2679843639051     2794946296622  -4.12 % │     691160     747372  -7.52 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-odd-order │ 1062.18 1071.17  -0.84 % │     2958394905201     2983994850900  -0.86 % │     4768819205838     4750383014522  +0.39 % │    1051004     995372  +5.59 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-verdi-raft │ 1254.39 1263.46  -0.72 % │     3492868234006     3517381749092  -0.70 % │     4960765830528     4897357937114  +1.29 % │     927808     934576  -0.72 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│          coq-mathcomp-field │  289.07  291.06  -0.68 % │      804868064537      810595834280  -0.71 % │     1252412058517     1249550256940  +0.23 % │     834736     827656  +0.86 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-hott │  315.38  316.95  -0.50 % │      854928579097      857698454914  -0.32 % │     1398285756188     1376082294104  +1.61 % │     608732     635908  -4.27 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-character │  161.14  160.48  +0.41 % │      448019105121      445943831113  +0.47 % │      631960923427      619054071468  +2.08 % │     749340     735360  +1.90 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                  coq-geocoq │ 1483.24 1474.56  +0.59 % │     4135126562389     4107465640498  +0.67 % │     6397763675247     6222387074122  +2.82 % │    1182616    1164380  +1.57 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-flocq │  161.80  160.28  +0.95 % │      448324438753      445543638301  +0.62 % │      570944112262      553096576990  +3.23 % │     833232     822056  +1.36 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-coqprime │   81.93   80.60  +1.65 % │      224639297465      222180114513  +1.11 % │      328100100367      310424105697  +5.69 % │     782568     768524  +1.83 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-bignums │   59.78   58.72  +1.81 % │      165901498444      161734022002  +2.58 % │      229964583586      215328903715  +6.80 % │     471316     472088  -0.16 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-corn │ 1793.86 1761.80  +1.82 % │     4996195675938     4906886376306  +1.82 % │     7830505518407     7512945384964  +4.23 % │     859932     855748  +0.49 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-solvable │  175.76  172.59  +1.84 % │      489179286418      480510685593  +1.80 % │      702143836157      677602444160  +3.62 % │     705904     691792  +2.04 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-lambda-rust │ 1291.28 1263.65  +2.19 % │     3593132019711     3517748788483  +2.14 % │     5145701602052     4950184399389  +3.95 % │    1238984    1174724  +5.47 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│        coq-mathcomp-algebra │  143.19  140.04  +2.25 % │      398316964221      390407936233  +2.03 % │      527671353637      503677892197  +4.76 % │     572976     565056  +1.40 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-verdi │  124.84  121.47  +2.77 % │      343435639901      335773985565  +2.28 % │      433051775261      413624326565  +4.70 % │     570712     574152  -0.60 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-fingroup │   49.70   48.16  +3.20 % │      137393049422      133302011858  +3.07 % │      193756629526      183798025741  +5.42 % │     495060     486332  +1.79 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-ssreflect │   52.56   50.65  +3.77 % │      143746267854      138368567687  +3.89 % │      189078340757      176319199609  +7.24 % │     532388     520776  +2.23 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-math-classes │  198.47  191.09  +3.86 % │      554361501369      532163857417  +4.17 % │      755487792735      700314983260  +7.88 % │     508836     505068  +0.75 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-compcert │  699.29  664.91  +5.17 % │     1948548051819     1854076888671  +5.10 % │     2786337702812     2556013202303  +9.01 % │    1128004    1131220  -0.28 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                         coq │  573.61  543.64  +5.51 % │     1604572527057     1518215487986  +5.69 % │     2237429635889     2073882823396  +7.89 % │     604468     592392  +2.04 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fiat-core │  112.51  106.18  +5.96 % │      319253112246      302260752861  +5.62 % │      437435530782      401496545163  +8.95 % │     485268     487352  -0.43 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-color │  656.62  618.91  +6.09 % │     1830626663379     1726226996352  +6.05 % │     2416311450164     2190563233295 +10.31 % │    1593232    1455000  +9.50 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-coquelicot │   75.48   69.50  +8.60 % │      206859130050      191017016431  +8.29 % │      276977963077      245324147911 +12.90 % │     590580     587328  +0.55 % │    0    0  +nan % │
└─────────────────────────────┴──────────────────────────┴──────────────────────────────────────────────┴──────────────────────────────────────────────┴────────────────────────────────┴───────────────────┘
4.07.1+flambda vs 4.11.1+flambda
┌─────────────────────────────┬──────────────────────────┬──────────────────────────────────────────────┬──────────────────────────────────────────────┬────────────────────────────────┬───────────────────┐
│                             │      user time [s]       │                  CPU cycles                  │               CPU instructions               │     max resident mem [KB]      │    mem faults     │
│                             │                          │                                              │                                              │                                │                   │
│                package_name │     NEW     OLD  PDIFF   │               NEW               OLD  PDIFF   │               NEW               OLD  PDIFF   │        NEW        OLD  PDIFF   │  NEW  OLD PDIFF   │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fourcolor │ 2172.69 2470.79 -12.06 % │     6061341210998     6888709975479 -12.01 % │    12402383426379    11287819140928  +9.87 % │     869216     788728 +10.20 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-engine-bench-lite │  347.21  361.40  -3.93 % │      976745485772     1016444055313  -3.91 % │     1644187565147     1716646663352  -4.22 % │    3507676    3016152 +16.30 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│ coq-rewriter-perf-SuperFast │  919.14  954.31  -3.69 % │     2560583470132     2655293334965  -3.57 % │     4115076283441     4099855753867  +0.37 % │    1123692    1218252  -7.76 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-fiat-parsers │  583.85  597.80  -2.33 % │     1638050041183     1674420289473  -2.17 % │     2662877450413     2472909026975  +7.68 % │    3393448    3291140  +3.11 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-rewriter │  538.50  548.95  -1.90 % │     1493416260820     1523284470286  -1.96 % │     2299874568862     2279513085454  +0.89 % │    1076564    1015164  +6.05 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│          coq-mathcomp-field │  255.63  259.43  -1.46 % │      711190400552      722650556761  -1.59 % │     1098439459967     1095942307297  +0.23 % │     857636     859464  -0.21 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-coqutil │   53.09   53.69  -1.12 % │      147768702298      149237552668  -0.98 % │      186590955375      180115452639  +3.60 % │     548888     576608  -4.81 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-unimath │ 3489.70 3526.20  -1.04 % │     9706127177846     9810912690460  -1.07 % │    18837068150843    18879101752334  -0.22 % │    1137628    1159956  -1.92 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-fiat-crypto │ 4570.77 4610.20  -0.86 % │    12691362042182    12802015193368  -0.86 % │    22594779738523    21725871874261  +4.00 % │    2876500    2472132 +16.36 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-hott │  290.69  291.76  -0.37 % │      787484584412      786546849889  +0.12 % │     1266474310523     1245261048905  +1.70 % │     667548     715548  -6.71 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│  coq-performance-tests-lite │  466.44  467.74  -0.28 % │     1303209988923     1307731054428  -0.35 % │     2203726441345     2326501838070  -5.28 % │     864396     824960  +4.78 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-odd-order │  954.15  955.21  -0.11 % │     2659333440267     2657968526311  +0.05 % │     4174794741419     4148834444544  +0.63 % │    1026840    1011056  +1.56 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-character │  144.79  144.65  +0.10 % │      402727088860      402013478980  +0.18 % │      560855199026      545803217654  +2.76 % │     767612     772220  -0.60 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-verdi-raft │ 1109.71 1107.66  +0.19 % │     3090649452737     3084565638170  +0.20 % │     4279036230680     4207519323294  +1.70 % │     967980     964264  +0.39 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-bedrock2 │  193.67  193.22  +0.23 % │      536182897768      534293642972  +0.35 % │      878384058716      864892111295  +1.56 % │    1139500    1165248  -2.21 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│        coq-mathcomp-algebra │  131.12  129.31  +1.40 % │      364812873077      358366270970  +1.80 % │      471572869514      446378993329  +5.64 % │     612536     604112  +1.39 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-flocq │  144.55  141.88  +1.88 % │      401510392532      393854883309  +1.94 % │      492974009754      474256960108  +3.95 % │     880276     912956  -3.58 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                  coq-geocoq │ 1316.38 1292.04  +1.88 % │     3670945758064     3602333993694  +1.90 % │     5589346496254     5404402012895  +3.42 % │    1177360    1182936  -0.47 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-coqprime │   75.65   74.04  +2.17 % │      207162686636      203309095756  +1.90 % │      296861032673      278772720923  +6.49 % │     828552     818012  +1.29 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-solvable │  159.14  155.30  +2.47 % │      443079421804      432000160065  +2.56 % │      625659620523      596703103219  +4.85 % │     733344     728036  +0.73 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                         coq │ 1020.96  993.59  +2.75 % │     2843503120291     2768213861344  +2.72 % │     3937968761753     3757222677125  +4.81 % │     650836     706616  -7.89 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-corn │ 1621.45 1571.71  +3.16 % │     4513393848598     4376504980709  +3.13 % │     6923329363035     6596195406268  +4.96 % │     813348     836040  -2.71 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-verdi │  114.97  111.44  +3.17 % │      316763320171      306925627120  +3.21 % │      387829410950      365953589574  +5.98 % │     598456     601932  -0.58 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-lambda-rust │ 1134.96 1097.26  +3.44 % │     3159759583217     3056276853849  +3.39 % │     4474268530223     4259900902370  +5.03 % │    1190672    1170844  +1.69 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-fingroup │   45.33   43.66  +3.83 % │      125813030667      121619787834  +3.45 % │      175119745692      165130893337  +6.05 % │     530928     531868  -0.18 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-ssreflect │   49.36   47.49  +3.94 % │      134918485537      129861307196  +3.89 % │      174352514531      161542540190  +7.93 % │     570272     570368  -0.02 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-math-classes │  177.55  170.37  +4.21 % │      495975882954      475045422169  +4.41 % │      644285699048      598139114550  +7.72 % │     546168     547716  -0.28 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-bignums │   53.77   51.30  +4.81 % │      148947406950      141546711171  +5.23 % │      203120741165      189020497773  +7.46 % │     500700     513128  -2.42 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fiat-core │  107.53  102.16  +5.26 % │      306284297375      289918082456  +5.65 % │      407396635475      374420622422  +8.81 % │     525772     534444  -1.62 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-compcert │  640.87  600.34  +6.75 % │     1786882282162     1672543403818  +6.84 % │     2478545132024     2239153830576 +10.69 % │    1168660    1186696  -1.52 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-color │  594.21  554.88  +7.09 % │     1656268360652     1549355376464  +6.90 % │     2111129264905     1894984169802 +11.41 % │    1606460    1507776  +6.55 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-coquelicot │   70.37   64.37  +9.32 % │      192961897845      176872122264  +9.10 % │      252791002794      220540720885 +14.62 % │     634152     644728  -1.64 % │    0    0  +nan % │
└─────────────────────────────┴──────────────────────────┴──────────────────────────────────────────────┴──────────────────────────────────────────────┴────────────────────────────────┴───────────────────┘
4.11.1 vs 4.11.1+flambda (https://gitlab.com/coq/coq/-/jobs/748909781)
┌─────────────────────────────┬──────────────────────────┬──────────────────────────────────────────────┬──────────────────────────────────────────────┬────────────────────────────────┬───────────────────┐
│                             │      user time [s]       │                  CPU cycles                  │               CPU instructions               │     max resident mem [KB]      │    mem faults     │
│                             │                          │                                              │                                              │                                │                   │
│                package_name │     NEW     OLD  PDIFF   │               NEW               OLD  PDIFF   │               NEW               OLD  PDIFF   │        NEW        OLD  PDIFF   │  NEW  OLD PDIFF   │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│  coq-performance-tests-lite │  472.87  545.64 -13.34 % │     1322732099296     1524450014152 -13.23 % │     2203152205994     2678293479457 -17.74 % │     864356     691116 +25.07 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-lambda-rust │ 1135.10 1296.26 -12.43 % │     3157824438256     3608696275653 -12.49 % │     4472155241698     5145063716562 -13.08 % │    1194816    1114264  +7.23 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-verdi-raft │ 1109.22 1263.66 -12.22 % │     3090634812733     3517623958105 -12.14 % │     4278781399231     4960477607664 -13.74 % │     960924     930368  +3.28 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-unimath │ 3477.01 3949.46 -11.96 % │     9668031521164    10990066158751 -12.03 % │    18844121596146    21092496625365 -10.66 % │    1137128    1026112 +10.82 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│          coq-mathcomp-field │  255.36  290.01 -11.95 % │      710662039980      807785981545 -12.02 % │     1098235892038     1251956429028 -12.28 % │     856428     835340  +2.52 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                  coq-geocoq │ 1321.33 1496.96 -11.73 % │     3680632949850     4170245224177 -11.74 % │     5589972184326     6398756511042 -12.64 % │    1185424    1167516  +1.53 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-bedrock2 │  193.58  219.27 -11.72 % │      535713883848      606881122165 -11.73 % │      878370444224     1013536929098 -13.34 % │    1125800    1087504  +3.52 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-flocq │  144.06  162.82 -11.52 % │      400181244902      451733046922 -11.41 % │      492993658703      571503088586 -13.74 % │     880192     833044  +5.66 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-odd-order │  953.13 1072.82 -11.16 % │     2655900939966     2988193533870 -11.12 % │     4174386765131     4768660348658 -12.46 % │    1077040    1006556  +7.00 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-math-classes │  178.15  200.51 -11.15 % │      496367068903      559901309534 -11.35 % │      644123061067      755476328927 -14.74 % │     545260     509244  +7.07 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-bignums │   53.57   60.22 -11.04 % │      148337829397      166501804368 -10.91 % │      203211040967      229839617244 -11.59 % │     500420     471508  +6.13 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-corn │ 1410.76 1582.36 -10.84 % │     3932246569883     4405412622010 -10.74 % │     6068723885927     6838398039761 -11.26 % │     813068     834792  -2.60 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-character │  144.49  161.84 -10.72 % │      402102614659      449714209447 -10.59 % │      560528048545      631306705116 -11.21 % │     765388     751464  +1.85 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-rewriter │  537.58  601.04 -10.56 % │     1491288383776     1667086480122 -10.55 % │     2299241907052     2596971656154 -11.46 % │    1068964    1049580  +1.85 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-solvable │  159.17  176.88 -10.01 % │      442390810430      491855486026 -10.06 % │      626741120874      701905754300 -10.71 % │     748644     706156  +6.02 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-coqutil │   53.14   58.94  -9.84 % │      147993750909      163770793848  -9.63 % │      186558455705      211654892334 -11.86 % │     547920     508060  +7.85 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-color │  594.46  658.90  -9.78 % │     1658391946008     1840212244712  -9.88 % │     2111583212277     2416626937290 -12.62 % │    1606296    1592708  +0.85 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│ coq-rewriter-perf-SuperFast │  923.30 1020.22  -9.50 % │     2570564755758     2838290435233  -9.43 % │     4113482231482     4625118229704 -11.06 % │    1120100    1069936  +4.69 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-compcert │  641.27  704.48  -8.97 % │     1785643830643     1962234189217  -9.00 % │     2475530003084     2785334066792 -11.12 % │    1167904    1127472  +3.59 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│        coq-mathcomp-algebra │  130.88  143.70  -8.92 % │      363611526988      399789727681  -9.05 % │      471245755960      527729296294 -10.70 % │     612332     572328  +6.99 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-fingroup │   45.32   49.47  -8.39 % │      125619772140      137386462805  -8.56 % │      175084693429      193435071001  -9.49 % │     530600     494900  +7.21 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-hott │  290.54  317.12  -8.38 % │      788194635136      859733870787  -8.32 % │     1266452514490     1396060588636  -9.28 % │     669644     604344 +10.81 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-verdi │  114.40  124.68  -8.25 % │      316100145625      344700463756  -8.30 % │      387914881493      433036517006 -10.42 % │     598500     594740  +0.63 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-coqprime │   75.26   81.55  -7.71 % │      206537995461      224936631974  -8.18 % │      296577559646      328219391367  -9.64 % │     828336     782468  +5.86 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-fiat-parsers │  583.87  632.13  -7.63 % │     1636430934269     1770518267294  -7.57 % │     2663564402228     2907592648811  -8.39 % │    3276076    3373356  -2.88 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-fiat-crypto │ 4578.38 4920.66  -6.96 % │    12717892949866    13664260232521  -6.93 % │    22606375544279    24533628614853  -7.86 % │    2876532    2141212 +34.34 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-coquelicot │   70.70   75.69  -6.59 % │      193610947150      207955770350  -6.90 % │      252810274590      276879593196  -8.69 % │     633764     590260  +7.37 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-ssreflect │   49.09   52.35  -6.23 % │      134903516535      143966212553  -6.30 % │      174938089991      189398009030  -7.63 % │     570228     531472  +7.29 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-engine-bench-lite │  349.13  368.58  -5.28 % │      982030343643     1037852634993  -5.38 % │     1641074787413     1762282414893  -6.88 % │    3507820    3494580  +0.38 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fiat-core │  107.06  111.81  -4.25 % │      306028793641      320009415699  -4.37 % │      407361267564      437305959035  -6.85 % │     525888     484384  +8.57 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fourcolor │ 2162.92 2211.50  -2.20 % │     6024730080500     6160280075591  -2.20 % │    12402576854690    12567265137273  -1.31 % │     868824     819696  +5.99 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼──────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                         coq │ 1020.00  576.65 +76.88 % │     2842349755889     1611578371294 +76.37 % │     3936033487502     2236879126659 +75.96 % │     667292     592764 +12.57 % │    0    0  +nan % │
└─────────────────────────────┴──────────────────────────┴──────────────────────────────────────────────┴──────────────────────────────────────────────┴────────────────────────────────┴───────────────────┘
4,11.1 vs 4.11.1 + best_fit (https://gitlab.com/coq/coq/-/jobs/746857605) pending:
┌─────────────────────────────┬─────────────────────────┬─────────────────────────────────────────────┬─────────────────────────────────────────────┬────────────────────────────────┬───────────────────┐
│                             │      user time [s]      │                 CPU cycles                  │              CPU instructions               │     max resident mem [KB]      │    mem faults     │
│                             │                         │                                             │                                             │                                │                   │
│                package_name │     NEW     OLD PDIFF   │               NEW               OLD PDIFF   │               NEW               OLD PDIFF   │        NEW        OLD  PDIFF   │  NEW  OLD PDIFF   │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-coquelicot │   70.50   75.87 -7.08 % │      193729618766      207671485050 -6.71 % │      254993873219      277051483411 -7.96 % │     599036     590428  +1.46 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-color │  630.95  659.21 -4.29 % │     1760370031245     1838451662548 -4.25 % │     2291785108765     2415601444120 -5.13 % │    1640204    1592792  +2.98 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-bignums │   57.68   60.26 -4.28 % │      159885622372      167062181403 -4.30 % │      219345536489      229938285743 -4.61 % │     474920     471420  +0.74 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-math-classes │  192.14  200.21 -4.03 % │      536371837913      559253430708 -4.09 % │      719666953262      755377151165 -4.73 % │     498956     508992  -1.97 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-compcert │  675.62  703.30 -3.94 % │     1881905913862     1959230763524 -3.95 % │     2649357683369     2784388721613 -4.85 % │    1124192    1127900  -0.33 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-fingroup │   48.07   49.75 -3.38 % │      132838356381      137902558026 -3.67 % │      186122534571      193837403266 -3.98 % │     493708     494904  -0.24 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-coqprime │   79.92   82.42 -3.03 % │      219681155813      225724215550 -2.68 % │      319027421168      328242084177 -2.81 % │     782032     782184  -0.02 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-corn │ 1536.69 1582.44 -2.89 % │     4273874355026     4403659832587 -2.95 % │     6628601262966     6836713060808 -3.04 % │     950688     834580 +13.91 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-ssreflect │   51.19   52.71 -2.88 % │      139681639382      144342819179 -3.23 % │      182313572317      189424566559 -3.75 % │     531892     531336  +0.10 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fiat-core │  109.46  112.48 -2.68 % │      311332180721      320365184857 -2.82 % │      427542273489      437430705779 -2.26 % │     484920     484268  +0.13 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                         coq │  563.21  576.96 -2.38 % │     1576308819076     1610245205465 -2.11 % │     2187544058282     2236810220429 -2.20 % │     588512     593052  -0.77 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-fiat-parsers │  618.86  633.39 -2.29 % │     1731265852835     1773448494310 -2.38 % │     2837844349251     2907499643517 -2.40 % │    3185016    3292800  -3.27 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│        coq-mathcomp-algebra │  140.42  143.61 -2.22 % │      390604794512      399565389731 -2.24 % │      512879774055      527841955613 -2.83 % │     576352     572288  +0.71 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                  coq-geocoq │ 1461.12 1493.98 -2.20 % │     4075268960726     4166243815994 -2.18 % │     6236381796162     6398556401954 -2.53 % │    1221920    1191516  +2.55 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-solvable │  173.03  176.90 -2.19 % │      481144093191      492429762180 -2.29 % │      686128455787      702752912769 -2.37 % │     680280     706156  -3.66 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-lambda-rust │ 1271.18 1297.36 -2.02 % │     3538746227038     3610610704151 -1.99 % │     5018531663035     5148591281629 -2.53 % │    1243264    1240428  +0.23 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-flocq │  158.82  162.01 -1.97 % │      440997225748      450394534027 -2.09 % │      555344854721      571593317994 -2.84 % │     872752     833092  +4.76 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-verdi │  122.99  125.12 -1.70 % │      337997031382      344917237326 -2.01 % │      421104566739      433019971219 -2.75 % │     574116     574096  +0.00 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-coqutil │   58.01   58.98 -1.64 % │      161030503409      164083407046 -1.86 % │      208079402963      211691925677 -1.71 % │     531724     514240  +3.40 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-verdi-raft │ 1244.16 1263.08 -1.50 % │     3462934018058     3518212047686 -1.57 % │     4874874038819     4960714126158 -1.73 % │     941672     930088  +1.25 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-character │  159.78  161.84 -1.27 % │      443960589531      449540801004 -1.24 % │      623282276969      631466635522 -1.30 % │     791620     752584  +5.19 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-bedrock2 │  217.23  219.42 -1.00 % │      601859855713      607877387382 -0.99 % │     1001604661928     1013525757593 -1.18 % │    1148996    1087608  +5.64 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│          coq-mathcomp-field │  287.36  289.79 -0.84 % │      800412664016      807119830866 -0.83 % │     1238362139593     1251971647883 -1.09 % │     873596     835420  +4.57 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-rewriter │  595.64  600.59 -0.82 % │     1652364467440     1667197877731 -0.89 % │     2575236402885     2596875935952 -0.83 % │    1046812    1038728  +0.78 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│  coq-performance-tests-lite │  541.80  546.12 -0.79 % │     1512194522848     1525722340376 -0.89 % │     2649980012493     2678635591138 -1.07 % │     756412     691164  +9.44 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-odd-order │ 1067.62 1072.76 -0.48 % │     2971447338179     2988380872167 -0.57 % │     4725684317412     4769156590256 -0.91 % │    1003436    1006520  -0.31 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-fiat-crypto │ 4901.88 4921.50 -0.40 % │    13618416019125    13671238004379 -0.39 % │    24254031646040    24526638041381 -1.11 % │    2151052    2147644  +0.16 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-engine-bench-lite │  369.29  370.08 -0.21 % │     1039543257940     1041264191280 -0.17 % │     1736565527762     1766066617798 -1.67 % │    4028992    3494580 +15.29 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│ coq-rewriter-perf-SuperFast │ 1022.17 1022.82 -0.06 % │     2842725985388     2845896155919 -0.11 % │     4585416965244     4625096605447 -0.86 % │    1300264    1070088 +21.51 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-unimath │ 3945.17 3941.19 +0.10 % │    10970777090175    10966299554603 +0.04 % │    21055731354020    21094885852005 -0.19 % │    1197992    1026192 +16.74 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-hott │  316.49  315.38 +0.35 % │      857746303708      856941986913 +0.09 % │     1398028494237     1395944773155 +0.15 % │     601572     604456  -0.48 % │    0    0  +nan % │
├─────────────────────────────┼─────────────────────────┼─────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fourcolor │ 2222.27 2210.66 +0.53 % │     6198510775582     6165506233851 +0.54 % │    12481702909540    12567128965262 -0.68 % │     853260     819564  +4.11 % │    0    0  +nan % │
└─────────────────────────────┴─────────────────────────┴─────────────────────────────────────────────┴─────────────────────────────────────────────┴────────────────────────────────┴───────────────────┘
4.07.1 vs 4.11.1 + best_fit (https://gitlab.com/coq/coq/-/jobs/741853859)
┌─────────────────────────────┬──────────────────────────┬──────────────────────────────────────────────┬─────────────────────────────────────────────┬────────────────────────────────┬───────────────────┐
│                             │      user time [s]       │                  CPU cycles                  │              CPU instructions               │     max resident mem [KB]      │    mem faults     │
│                             │                          │                                              │                                             │                                │                   │
│                package_name │     NEW     OLD  PDIFF   │               NEW               OLD  PDIFF   │               NEW               OLD PDIFF   │        NEW        OLD  PDIFF   │  NEW  OLD PDIFF   │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fourcolor │ 2208.20 2515.67 -12.22 % │     6159422285184     7013825265291 -12.18 % │    12479144575450    11447327440831 +9.01 % │     853156     775076 +10.07 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-fiat-parsers │  619.50  646.15  -4.12 % │     1735126031141     1808696168932  -4.07 % │     2838550717211     2718308274041 +4.42 % │    3185216    2997820  +6.25 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│ coq-rewriter-perf-SuperFast │ 1030.98 1062.95  -3.01 % │     2867748850504     2957929888632  -3.05 % │     4585672381839     4629792501126 -0.95 % │    1300288    1070648 +21.45 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-engine-bench-lite │  374.03  382.28  -2.16 % │     1051103034220     1075893896203  -2.30 % │     1737296645168     1836802613305 -5.42 % │    4070992    3508608 +16.03 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-rewriter │  598.61  610.92  -2.01 % │     1661211393708     1697511318644  -2.14 % │     2574577998925     2583861631743 -0.36 % │    1047460    1036884  +1.02 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-coqutil │   58.26   59.18  -1.55 % │      161580392326      164369606377  -1.70 % │      208089699381      204982955620 +1.52 % │     531876     528920  +0.56 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-coqprime │   80.06   81.10  -1.28 % │      219965606364      222148875778  -0.98 % │      319079856819      310407543066 +2.79 % │     782048     768480  +1.77 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-unimath │ 3962.45 4003.12  -1.02 % │    11024288561939    11138423121186  -1.02 % │    21051121077382    21169051946498 -0.56 % │    1214140    1113564  +9.03 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-flocq │  159.30  160.55  -0.78 % │      442141054386      444858019255  -0.61 % │      555367689174      553082669644 +0.41 % │     873748     822152  +6.28 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-fiat-crypto │ 4919.52 4955.62  -0.73 % │    13651691890501    13765111101646  -0.82 % │    24269169435898    23635281614825 +2.68 % │    2156812    2339816  -7.82 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-verdi-raft │ 1252.41 1261.15  -0.69 % │     3488554192335     3509951514886  -0.61 % │     4875375109872     4897289511440 -0.45 % │     947468     934672  +1.37 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│          coq-mathcomp-field │  289.33  291.03  -0.58 % │      805174394380      810577501518  -0.67 % │     1238371870909     1249551428572 -0.89 % │     873180     825976  +5.71 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-bedrock2 │  218.48  219.42  -0.43 % │      604883094095      608617199014  -0.61 % │     1001695193394     1003268567223 -0.16 % │    1149148    1087364  +5.68 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                  coq-geocoq │ 1472.14 1474.00  -0.13 % │     4102229640371     4112364285360  -0.25 % │     6236354838250     6222306192639 +0.23 % │    1231056    1147624  +7.27 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│  coq-performance-tests-lite │  545.55  546.06  -0.09 % │     1523706134075     1525018234346  -0.09 % │     2650504876062     2794681720014 -5.16 % │     756544     747360  +1.23 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-fingroup │   48.11   48.06  +0.10 % │      133142460404      133348436384  -0.15 % │      186097692665      183850811227 +1.22 % │     493724     486340  +1.52 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                 coq-bignums │   58.32   58.11  +0.36 % │      160860843862      160627147837  +0.15 % │      219322383504      215331314434 +1.85 % │     474828     472144  +0.57 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-odd-order │ 1074.52 1068.44  +0.57 % │     2992236515501     2978079039587  +0.48 % │     4725839951155     4750344215863 -0.52 % │    1004716     994032  +1.07 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-corn │ 1771.62 1761.20  +0.59 % │     4934590397008     4901326716356  +0.68 % │     7611974748873     7512882355561 +1.32 % │     950988     855988 +11.10 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-character │  160.98  159.90  +0.68 % │      447187125934      445380591886  +0.41 % │      623765722069      619098431123 +0.75 % │     790548     736704  +7.31 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│             coq-lambda-rust │ 1274.17 1263.20  +0.87 % │     3545991125663     3516340102274  +0.84 % │     5016270117803     4947745242286 +1.38 % │    1222968    1174820  +4.10 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│       coq-mathcomp-solvable │  174.01  172.51  +0.87 % │      484446784090      480253546322  +0.87 % │      686104243810      677668026916 +1.24 % │     679492     691948  -1.80 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                    coq-hott │  318.06  315.05  +0.96 % │      861854398522      856708496892  +0.60 % │     1398975739207     1376024905209 +1.67 % │     579712     635964  -8.85 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-verdi │  122.79  121.62  +0.96 % │      338703843788      335957978534  +0.82 % │      421118943256      413673407150 +1.80 % │     570748     574240  -0.61 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│      coq-mathcomp-ssreflect │   51.17   50.66  +1.01 % │      139831170592      138430324263  +1.01 % │      182268137034      176280676935 +3.40 % │     532584     520832  +2.26 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│        coq-mathcomp-algebra │  141.93  140.34  +1.13 % │      393248098935      390141024521  +0.80 % │      513136676800      503715278515 +1.87 % │     574280     565036  +1.64 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│              coq-coquelicot │   70.84   69.87  +1.39 % │      194607296865      191135104045  +1.82 % │      254996589554      245303622507 +3.95 % │     599300     587168  +2.07 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                coq-compcert │  678.71  665.87  +1.93 % │     1889485385741     1856340836411  +1.79 % │     2649341650215     2555954385433 +3.65 % │    1124164    1131392  -0.64 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│            coq-math-classes │  193.92  190.08  +2.02 % │      540195760748      530267944670  +1.87 % │      719549432958      700334701606 +2.74 % │     498856     504748  -1.17 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                   coq-color │  633.18  617.46  +2.55 % │     1766537049254     1724694289532  +2.43 % │     2292326187434     2190545821844 +4.65 % │    1638820    1455240 +12.62 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│               coq-fiat-core │  110.22  105.95  +4.03 % │      312971015270      301974056873  +3.64 % │      426957676501      401523424965 +6.33 % │     484804     487364  -0.53 % │    0    0  +nan % │
├─────────────────────────────┼──────────────────────────┼──────────────────────────────────────────────┼─────────────────────────────────────────────┼────────────────────────────────┼───────────────────┤
│                         coq │  566.12  542.99  +4.26 % │     1580218181016     1517998084424  +4.10 % │     2187950201891     2073653504771 +5.51 % │     597436     592388  +0.85 % │    0    0  +nan % │
└─────────────────────────────┴──────────────────────────┴──────────────────────────────────────────────┴─────────────────────────────────────────────┴────────────────────────────────┴───────────────────┘
Clone this wiki locally