{ "version": "1.1", "timestamp": "2026-09-11T13:15:57.194Z", "environment": { "node": "v24.21.0", "platform": "linux", "arch": "x64" }, "config": { "iterations": 100, "timeoutMs": 120000 }, "results": [ { "provider": "archil", "mode": "concurrent", "concurrency": 100, "wallClockMs": 444.78, "timeToFirstReadyMs": 199.59, "iterations": [ { "ttiMs": 259.61 }, { "ttiMs": 253.19 }, { "ttiMs": 260.74 }, { "ttiMs": 231.76 }, { "ttiMs": 199.59 }, { "ttiMs": 256.45 }, { "ttiMs": 256.67 }, { "ttiMs": 244.6 }, { "ttiMs": 229.28 }, { "ttiMs": 264.04 }, { "ttiMs": 215.85 }, { "ttiMs": 261.69 }, { "ttiMs": 262.44 }, { "ttiMs": 246.98 }, { "ttiMs": 298.97 }, { "ttiMs": 229.53 }, { "ttiMs": 255.07 }, { "ttiMs": 302.22 }, { "ttiMs": 271.35 }, { "ttiMs": 297.98 }, { "ttiMs": 258.08 }, { "ttiMs": 284.47 }, { "ttiMs": 291.34 }, { "ttiMs": 250.81 }, { "ttiMs": 255.63 }, { "ttiMs": 253.79 }, { "ttiMs": 265.54 }, { "ttiMs": 247.61 }, { "ttiMs": 384.48 }, { "ttiMs": 297.41 }, { "ttiMs": 304.97 }, { "ttiMs": 317.38 }, { "ttiMs": 394.44 }, { "ttiMs": 305.15 }, { "ttiMs": 289.93 }, { "ttiMs": 238.53 }, { "ttiMs": 290.64 }, { "ttiMs": 303.55 }, { "ttiMs": 255.74 }, { "ttiMs": 363.69 }, { "ttiMs": 349.95 }, { "ttiMs": 355.89 }, { "ttiMs": 255.93 }, { "ttiMs": 300.21 }, { "ttiMs": 345.69 }, { "ttiMs": 358.56 }, { "ttiMs": 331.94 }, { "ttiMs": 263.97 }, { "ttiMs": 373.89 }, { "ttiMs": 406.54 }, { "ttiMs": 296.47 }, { "ttiMs": 340.64 }, { "ttiMs": 366.56 }, { "ttiMs": 345.82 }, { "ttiMs": 266.9 }, { "ttiMs": 321.52 }, { "ttiMs": 361.12 }, { "ttiMs": 318.16 }, { "ttiMs": 381.28 }, { "ttiMs": 354.83 }, { "ttiMs": 403.53 }, { "ttiMs": 362.53 }, { "ttiMs": 422.8 }, { "ttiMs": 392.37 }, { "ttiMs": 322.05 }, { "ttiMs": 383.38 }, { "ttiMs": 374.37 }, { "ttiMs": 397.06 }, { "ttiMs": 392.43 }, { "ttiMs": 404.54 }, { "ttiMs": 383.66 }, { "ttiMs": 434.43 }, { "ttiMs": 411.9 }, { "ttiMs": 401.71 }, { "ttiMs": 382.3 }, { "ttiMs": 345.25 }, { "ttiMs": 415.89 }, { "ttiMs": 443.78 }, { "ttiMs": 426.6 }, { "ttiMs": 387.34 }, { "ttiMs": 428.93 }, { "ttiMs": 340.05 }, { "ttiMs": 404.25 }, { "ttiMs": 376.5 }, { "ttiMs": 362.71 }, { "ttiMs": 415.36 }, { "ttiMs": 296.66 }, { "ttiMs": 391.16 }, { "ttiMs": 427.15 }, { "ttiMs": 324.9 }, { "ttiMs": 408.9 }, { "ttiMs": 375.17 }, { "ttiMs": 387.58 }, { "ttiMs": 374.5 }, { "ttiMs": 416.42 }, { "ttiMs": 434.54 }, { "ttiMs": 421.15 }, { "ttiMs": 414.05 }, { "ttiMs": 395.5 }, { "ttiMs": 358.58 } ], "summary": { "ttiMs": { "median": 342.94, "p95": 415.89, "p99": 426.6 } }, "compositeScore": 96.26, "successRate": 1 }, { "provider": "arker", "mode": "concurrent", "concurrency": 100, "wallClockMs": 1033.87, "timeToFirstReadyMs": 147.31, "iterations": [ { "ttiMs": 226.22 }, { "ttiMs": 219.41 }, { "ttiMs": 235.48 }, { "ttiMs": 289.39 }, { "ttiMs": 244.23 }, { "ttiMs": 222.32 }, { "ttiMs": 289.04 }, { "ttiMs": 253.86 }, { "ttiMs": 208.1 }, { "ttiMs": 235.72 }, { "ttiMs": 285.88 }, { "ttiMs": 272.82 }, { "ttiMs": 346.87 }, { "ttiMs": 266.82 }, { "ttiMs": 193.61 }, { "ttiMs": 238.53 }, { "ttiMs": 308.13 }, { "ttiMs": 250.42 }, { "ttiMs": 343.56 }, { "ttiMs": 241.33 }, { "ttiMs": 235.52 }, { "ttiMs": 229.46 }, { "ttiMs": 247.29 }, { "ttiMs": 279.46 }, { "ttiMs": 295.65 }, { "ttiMs": 250.68 }, { "ttiMs": 272.58 }, { "ttiMs": 335.14 }, { "ttiMs": 429.58 }, { "ttiMs": 346.62 }, { "ttiMs": 429.31 }, { "ttiMs": 275.59 }, { "ttiMs": 310.95 }, { "ttiMs": 629.71 }, { "ttiMs": 301.42 }, { "ttiMs": 331.84 }, { "ttiMs": 322.81 }, { "ttiMs": 269.53 }, { "ttiMs": 269.65 }, { "ttiMs": 429.79 }, { "ttiMs": 629.53 }, { "ttiMs": 301.51 }, { "ttiMs": 316.7 }, { "ttiMs": 380.17 }, { "ttiMs": 473.18 }, { "ttiMs": 319.67 }, { "ttiMs": 380.07 }, { "ttiMs": 429.81 }, { "ttiMs": 571.48 }, { "ttiMs": 473.03 }, { "ttiMs": 322.6 }, { "ttiMs": 319.76 }, { "ttiMs": 892.41 }, { "ttiMs": 301.57 }, { "ttiMs": 292.01 }, { "ttiMs": 232.09 }, { "ttiMs": 334.63 }, { "ttiMs": 282.42 }, { "ttiMs": 379.92 }, { "ttiMs": 316.43 }, { "ttiMs": 328.57 }, { "ttiMs": 380.44 }, { "ttiMs": 472.74 }, { "ttiMs": 571.49 }, { "ttiMs": 689.48 }, { "ttiMs": 334.81 }, { "ttiMs": 472.84 }, { "ttiMs": 325.54 }, { "ttiMs": 571.13 }, { "ttiMs": 325.66 }, { "ttiMs": 529.41 }, { "ttiMs": 383.24 }, { "ttiMs": 476.26 }, { "ttiMs": 340.38 }, { "ttiMs": 479.5 }, { "ttiMs": 473.18 }, { "ttiMs": 433.45 }, { "ttiMs": 304.45 }, { "ttiMs": 349.36 }, { "ttiMs": 1032.87 }, { "ttiMs": 316.6 }, { "ttiMs": 429.43 }, { "ttiMs": 343.31 }, { "ttiMs": 429.81 }, { "ttiMs": 343.42 }, { "ttiMs": 298.26 }, { "ttiMs": 429.65 }, { "ttiMs": 313.44 }, { "ttiMs": 328.59 }, { "ttiMs": 331.42 }, { "ttiMs": 379.53 }, { "ttiMs": 429.14 }, { "ttiMs": 429.83 }, { "ttiMs": 340.07 }, { "ttiMs": 473.15 }, { "ttiMs": 628.92 }, { "ttiMs": 346.46 }, { "ttiMs": 472.4 }, { "ttiMs": 380.06 }, { "ttiMs": 146.31 } ], "summary": { "ttiMs": { "median": 330.01, "p95": 529.41, "p99": 628.92 } }, "compositeScore": 95.75, "successRate": 1 }, { "provider": "beam", "mode": "concurrent", "concurrency": 100, "wallClockMs": 2647.52, "timeToFirstReadyMs": 1863.98, "iterations": [ { "ttiMs": 2639.92 }, { "ttiMs": 1888.3 }, { "ttiMs": 1889.2 }, { "ttiMs": 1884.74 }, { "ttiMs": 2405.19 }, { "ttiMs": 2260.48 }, { "ttiMs": 2258.56 }, { "ttiMs": 1889.51 }, { "ttiMs": 1865.12 }, { "ttiMs": 2343.81 }, { "ttiMs": 2368.49 }, { "ttiMs": 2251.18 }, { "ttiMs": 1888.75 }, { "ttiMs": 2399.79 }, { "ttiMs": 2379.15 }, { "ttiMs": 2398.83 }, { "ttiMs": 2239.48 }, { "ttiMs": 1869.64 }, { "ttiMs": 2379.62 }, { "ttiMs": 2381.14 }, { "ttiMs": 2384.12 }, { "ttiMs": 2256.14 }, { "ttiMs": 2253.5 }, { "ttiMs": 2391.73 }, { "ttiMs": 2251.89 }, { "ttiMs": 2353.99 }, { "ttiMs": 2257.79 }, { "ttiMs": 1869.94 }, { "ttiMs": 1869.19 }, { "ttiMs": 2254.03 }, { "ttiMs": 2266.7 }, { "ttiMs": 2636.42 }, { "ttiMs": 2378.48 }, { "ttiMs": 1876.49 }, { "ttiMs": 1870.27 }, { "ttiMs": 2634.05 }, { "ttiMs": 2379.98 }, { "ttiMs": 2633.39 }, { "ttiMs": 2238.83 }, { "ttiMs": 1887.38 }, { "ttiMs": 2352.96 }, { "ttiMs": 1864.57 }, { "ttiMs": 2399.33 }, { "ttiMs": 1864.21 }, { "ttiMs": 2254.98 }, { "ttiMs": 2380.18 }, { "ttiMs": 1872.28 }, { "ttiMs": 1876.88 }, { "ttiMs": 2236.63 }, { "ttiMs": 2380.43 }, { "ttiMs": 2254.68 }, { "ttiMs": 2416.53 }, { "ttiMs": 2353.45 }, { "ttiMs": 2252.23 }, { "ttiMs": 2257.92 }, { "ttiMs": 2368.69 }, { "ttiMs": 2398.97 }, { "ttiMs": 1863.79 }, { "ttiMs": 2239.79 }, { "ttiMs": 1862.98 }, { "ttiMs": 2260.36 }, { "ttiMs": 2179.62 }, { "ttiMs": 2379.59 }, { "ttiMs": 2258.47 }, { "ttiMs": 2379.07 }, { "ttiMs": 2238.93 }, { "ttiMs": 2423.05 }, { "ttiMs": 1889.76 }, { "ttiMs": 2423.62 }, { "ttiMs": 2179.16 }, { "ttiMs": 1870.48 }, { "ttiMs": 2646.52 }, { "ttiMs": 2238.38 }, { "ttiMs": 1868.21 }, { "ttiMs": 2415.71 }, { "ttiMs": 1889.39 }, { "ttiMs": 2377.93 }, { "ttiMs": 2404.99 }, { "ttiMs": 2404.31 }, { "ttiMs": 2234.55 }, { "ttiMs": 1868.6 }, { "ttiMs": 2353.97 }, { "ttiMs": 2251.24 }, { "ttiMs": 2251.82 }, { "ttiMs": 2259.69 }, { "ttiMs": 2235.58 }, { "ttiMs": 2378.45 }, { "ttiMs": 2403.82 }, { "ttiMs": 2258.76 }, { "ttiMs": 2354.22 }, { "ttiMs": 1889.98 }, { "ttiMs": 2421.76 }, { "ttiMs": 2416.02 }, { "ttiMs": 1881.7 }, { "ttiMs": 2422.32 }, { "ttiMs": 2368.72 }, { "ttiMs": 2257.04 }, { "ttiMs": 2342.53 }, { "ttiMs": 2422.57 }, { "ttiMs": 2190.91 } ], "summary": { "ttiMs": { "median": 2258.52, "p95": 2421.76, "p99": 2423.62 } }, "compositeScore": 76.76, "successRate": 1 }, { "provider": "blaxel", "mode": "concurrent", "concurrency": 100, "wallClockMs": 700.45, "timeToFirstReadyMs": 467.61, "iterations": [ { "ttiMs": 623.3 }, { "ttiMs": 495.91 }, { "ttiMs": 502.07 }, { "ttiMs": 527.8 }, { "ttiMs": 493.87 }, { "ttiMs": 495.54 }, { "ttiMs": 519.61 }, { "ttiMs": 614.81 }, { "ttiMs": 467.61 }, { "ttiMs": 564.39 }, { "ttiMs": 644.15 }, { "ttiMs": 612.27 }, { "ttiMs": 656.1 }, { "ttiMs": 638.74 }, { "ttiMs": 663.8 }, { "ttiMs": 552.04 }, { "ttiMs": 608.59 }, { "ttiMs": 514.14 }, { "ttiMs": 659.85 }, { "ttiMs": 586.12 }, { "ttiMs": 574.95 }, { "ttiMs": 687.46 }, { "ttiMs": 655.01 }, { "ttiMs": 568.73 }, { "ttiMs": 647.98 }, { "ttiMs": 629.72 }, { "ttiMs": 581.06 }, { "ttiMs": 586.71 }, { "ttiMs": 606.58 }, { "ttiMs": 629.36 }, { "ttiMs": 647.24 }, { "ttiMs": 589.04 }, { "ttiMs": 614.99 }, { "ttiMs": 634.48 }, { "ttiMs": 588.37 }, { "ttiMs": 599.41 }, { "ttiMs": 619.96 }, { "ttiMs": 639.73 }, { "ttiMs": 535.46 }, { "ttiMs": 671.92 }, { "ttiMs": 649.22 }, { "ttiMs": 645.78 }, { "ttiMs": 674.35 }, { "ttiMs": 649.51 }, { "ttiMs": 596.62 }, { "ttiMs": 648.53 }, { "ttiMs": 671.27 }, { "ttiMs": 656.46 }, { "ttiMs": 634.83 }, { "ttiMs": 679.82 }, { "ttiMs": 698.58 }, { "ttiMs": 592.15 }, { "ttiMs": 616.5 }, { "ttiMs": 661.76 }, { "ttiMs": 653.29 }, { "ttiMs": 588.56 }, { "ttiMs": 551.36 }, { "ttiMs": 686.83 }, { "ttiMs": 646.54 }, { "ttiMs": 637.8 }, { "ttiMs": 612.32 }, { "ttiMs": 675.1 }, { "ttiMs": 594.91 }, { "ttiMs": 637.36 }, { "ttiMs": 606.76 }, { "ttiMs": 693.68 }, { "ttiMs": 667.83 }, { "ttiMs": 672.25 }, { "ttiMs": 648.79 }, { "ttiMs": 607.38 }, { "ttiMs": 552.27 }, { "ttiMs": 612.59 }, { "ttiMs": 633.15 }, { "ttiMs": 598.45 }, { "ttiMs": 629.73 }, { "ttiMs": 607.01 }, { "ttiMs": 615.85 }, { "ttiMs": 674.7 }, { "ttiMs": 621.88 }, { "ttiMs": 633.49 }, { "ttiMs": 629.98 }, { "ttiMs": 651.33 }, { "ttiMs": 635.24 }, { "ttiMs": 656.57 }, { "ttiMs": 554.97 }, { "ttiMs": 584.06 }, { "ttiMs": 592.42 }, { "ttiMs": 595.66 }, { "ttiMs": 605.84 }, { "ttiMs": 616.65 }, { "ttiMs": 660.18 }, { "ttiMs": 640.69 }, { "ttiMs": 647.25 }, { "ttiMs": 659.85 }, { "ttiMs": 634.85 }, { "ttiMs": 661.86 }, { "ttiMs": 697.39 }, { "ttiMs": 699.45 }, { "ttiMs": 637.9 }, { "ttiMs": 653.36 } ], "summary": { "ttiMs": { "median": 629.85, "p95": 674.35, "p99": 686.83 } }, "compositeScore": 93.5, "successRate": 1 }, { "provider": "cloud-run", "mode": "concurrent", "concurrency": 100, "wallClockMs": 1438.38, "timeToFirstReadyMs": 349.12, "iterations": [ { "ttiMs": 415.66 }, { "ttiMs": 867.2 }, { "ttiMs": 524.59 }, { "ttiMs": 505.68 }, { "ttiMs": 534.32 }, { "ttiMs": 533.83 }, { "ttiMs": 495.5 }, { "ttiMs": 618.59 }, { "ttiMs": 561.23 }, { "ttiMs": 349.12 }, { "ttiMs": 521.75 }, { "ttiMs": 392.26 }, { "ttiMs": 1047.12 }, { "ttiMs": 528.87 }, { "ttiMs": 669.15 }, { "ttiMs": 430.02 }, { "ttiMs": 516.31 }, { "ttiMs": 495.92 }, { "ttiMs": 385.47 }, { "ttiMs": 442.7 }, { "ttiMs": 662.16 }, { "ttiMs": 441.13 }, { "ttiMs": 613.73 }, { "ttiMs": 772.06 }, { "ttiMs": 799.12 }, { "ttiMs": 521.28 }, { "ttiMs": 497.65 }, { "ttiMs": 393.82 }, { "ttiMs": 468.61 }, { "ttiMs": 506.37 }, { "ttiMs": 769.17 }, { "ttiMs": 600.61 }, { "ttiMs": 761.77 }, { "ttiMs": 666.3 }, { "ttiMs": 690.79 }, { "ttiMs": 521.95 }, { "ttiMs": 638.38 }, { "ttiMs": 626.56 }, { "ttiMs": 524.99 }, { "ttiMs": 480.51 }, { "ttiMs": 510 }, { "ttiMs": 504.82 }, { "ttiMs": 522.07 }, { "ttiMs": 451.99 }, { "ttiMs": 597.84 }, { "ttiMs": 460.72 }, { "ttiMs": 513.96 }, { "ttiMs": 550.89 }, { "ttiMs": 610.28 }, { "ttiMs": 546.5 }, { "ttiMs": 684.82 }, { "ttiMs": 442.29 }, { "ttiMs": 496.76 }, { "ttiMs": 498.45 }, { "ttiMs": 481.17 }, { "ttiMs": 1438.38 }, { "ttiMs": 552.89 }, { "ttiMs": 599.81 }, { "ttiMs": 1017.72 }, { "ttiMs": 546.7 }, { "ttiMs": 685 }, { "ttiMs": 707.17 }, { "ttiMs": 590.97 }, { "ttiMs": 604.64 }, { "ttiMs": 524.69 }, { "ttiMs": 519.74 }, { "ttiMs": 505.32 }, { "ttiMs": 503 }, { "ttiMs": 573.86 }, { "ttiMs": 580.05 }, { "ttiMs": 517.72 }, { "ttiMs": 546.21 }, { "ttiMs": 641.84 }, { "ttiMs": 588.38 }, { "ttiMs": 855.4 }, { "ttiMs": 544.72 }, { "ttiMs": 584.94 }, { "ttiMs": 632.27 }, { "ttiMs": 1049.81 }, { "ttiMs": 791.6 }, { "ttiMs": 625.45 }, { "ttiMs": 789.13 }, { "ttiMs": 531.12 }, { "ttiMs": 859.95 }, { "ttiMs": 830.5 }, { "ttiMs": 629.27 }, { "ttiMs": 530.65 }, { "ttiMs": 900.89 }, { "ttiMs": 653.45 }, { "ttiMs": 549.66 }, { "ttiMs": 909.5 }, { "ttiMs": 650.19 }, { "ttiMs": 604.83 }, { "ttiMs": 535.59 }, { "ttiMs": 518.42 }, { "ttiMs": 866.05 }, { "ttiMs": 1132.25 }, { "ttiMs": 538.98 }, { "ttiMs": 907.67 }, { "ttiMs": 897.8 } ], "summary": { "ttiMs": { "median": 551.89, "p95": 867.2, "p99": 909.5 } }, "compositeScore": 93.16, "successRate": 1 }, { "provider": "cloudflare", "mode": "concurrent", "concurrency": 100, "wallClockMs": 11703.22, "timeToFirstReadyMs": 1858.74, "iterations": [ { "ttiMs": 5861.47 }, { "ttiMs": 4998.65 }, { "ttiMs": 4486.83 }, { "ttiMs": 5346.12 }, { "ttiMs": 6320.45 }, { "ttiMs": 4076.6 }, { "ttiMs": 6330.85 }, { "ttiMs": 4499.32 }, { "ttiMs": 5966.06 }, { "ttiMs": 5931.74 }, { "ttiMs": 6047.46 }, { "ttiMs": 6088.42 }, { "ttiMs": 5407.58 }, { "ttiMs": 3933.39 }, { "ttiMs": 6792.12 }, { "ttiMs": 6470.8 }, { "ttiMs": 6056.55 }, { "ttiMs": 6144.67 }, { "ttiMs": 7458.35 }, { "ttiMs": 4781.13 }, { "ttiMs": 2408.01 }, { "ttiMs": 5061.83 }, { "ttiMs": 4287.11 }, { "ttiMs": 7099.65 }, { "ttiMs": 5951.02 }, { "ttiMs": 4449.77 }, { "ttiMs": 6368.29 }, { "ttiMs": 4877.2 }, { "ttiMs": 4266.34 }, { "ttiMs": 6294.3 }, { "ttiMs": 6346.16 }, { "ttiMs": 7129.21 }, { "ttiMs": 8475.42 }, { "ttiMs": 5246.67 }, { "ttiMs": 6792.31 }, { "ttiMs": 6091.13 }, { "ttiMs": 2234.29 }, { "ttiMs": 5027.44 }, { "ttiMs": 5792.72 }, { "ttiMs": 3927.08 }, { "ttiMs": 5244.55 }, { "ttiMs": 6524.73 }, { "ttiMs": 5423.9 }, { "ttiMs": 6141.47 }, { "ttiMs": 6179.85 }, { "ttiMs": 5812.69 }, { "ttiMs": 2071.71 }, { "ttiMs": 11702.22 }, { "ttiMs": 6009.08 }, { "ttiMs": 2020.29 }, { "ttiMs": 6115.68 }, { "ttiMs": 2215.63 }, { "ttiMs": 4299.04 }, { "ttiMs": 6746.64 }, { "ttiMs": 4254.98 }, { "ttiMs": 5878.77 }, { "ttiMs": 3795.16 }, { "ttiMs": 4559.7 }, { "ttiMs": 5679.25 }, { "ttiMs": 2407.36 }, { "ttiMs": 2601.93 }, { "ttiMs": 5912.22 }, { "ttiMs": 5891.7 }, { "ttiMs": 5583.22 }, { "ttiMs": 5724.27 }, { "ttiMs": 3824.55 }, { "ttiMs": 7743.03 }, { "ttiMs": 4364.54 }, { "ttiMs": 5032.09 }, { "ttiMs": 6871.15 }, { "ttiMs": 2643.87 }, { "ttiMs": 5555.94 }, { "ttiMs": 5205.22 }, { "ttiMs": 5883.83 }, { "ttiMs": 6571.11 }, { "ttiMs": 4788.47 }, { "ttiMs": 8025.35 }, { "ttiMs": 5627.97 }, { "ttiMs": 7994.94 }, { "ttiMs": 6144.73 }, { "ttiMs": 4936.83 }, { "ttiMs": 1857.74 }, { "ttiMs": 5461.94 }, { "ttiMs": 4752.21 }, { "ttiMs": 7195.13 }, { "ttiMs": 5314.24 }, { "ttiMs": 4372.65 }, { "ttiMs": 6759.55 }, { "ttiMs": 4660.63 }, { "ttiMs": 3575.45 }, { "ttiMs": 5927.79 }, { "ttiMs": 4313.04 }, { "ttiMs": 6083.13 }, { "ttiMs": 4295.01 }, { "ttiMs": 8059.26 }, { "ttiMs": 6900.82 }, { "ttiMs": 6001.6 }, { "ttiMs": 5401.96 }, { "ttiMs": 6740.48 }, { "ttiMs": 6202.27 } ], "summary": { "ttiMs": { "median": 5701.76, "p95": 7099.65, "p99": 7743.03 } }, "compositeScore": 36.43, "successRate": 1 }, { "provider": "codesandbox", "mode": "concurrent", "concurrency": 100, "wallClockMs": 13296.35, "timeToFirstReadyMs": 4111.78, "iterations": [ { "ttiMs": 12166.88 }, { "ttiMs": 10616.25 }, { "ttiMs": 5648.28 }, { "ttiMs": 4111.98 }, { "ttiMs": 12779.35 }, { "ttiMs": 8614.12 }, { "ttiMs": 5058.39 }, { "ttiMs": 8163.12 }, { "ttiMs": 5034.82 }, { "ttiMs": 4991.79 }, { "ttiMs": 4744.63 }, { "ttiMs": 7734.05 }, { "ttiMs": 8340.15 }, { "ttiMs": 5988.93 }, { "ttiMs": 6056.87 }, { "ttiMs": 9178.59 }, { "ttiMs": 4110.78 }, { "ttiMs": 6702.57 }, { "ttiMs": 10201.26 }, { "ttiMs": 5663.6 }, { "ttiMs": 4871.37 }, { "ttiMs": 6172.43 }, { "ttiMs": 12880.57 }, { "ttiMs": 4497.62 }, { "ttiMs": 5827.67 }, { "ttiMs": 5212.02 }, { "ttiMs": 11728.23 }, { "ttiMs": 5813.33 }, { "ttiMs": 7361.4 }, { "ttiMs": 13295.35 }, { "ttiMs": 4618.59 }, { "ttiMs": 8724.33 }, { "ttiMs": 9448.43 }, { "ttiMs": 8049.11 }, { "ttiMs": 9860.1 }, { "ttiMs": 11909.26 }, { "ttiMs": 12577.81 }, { "ttiMs": 7568.42 }, { "ttiMs": 5433.85 }, { "ttiMs": 7176.67 }, { "ttiMs": 7975.15 }, { "ttiMs": 8194.17 }, { "ttiMs": 5706.05 }, { "ttiMs": 5396.17 }, { "ttiMs": 9224.8 }, { "ttiMs": 8938.05 }, { "ttiMs": 7133.55 }, { "ttiMs": 8953.93 }, { "ttiMs": 10421.59 }, { "ttiMs": 5757.97 }, { "ttiMs": 4625.93 }, { "ttiMs": 9617.6 }, { "ttiMs": 6266.36 }, { "ttiMs": 10137.5 }, { "ttiMs": 9289.88 }, { "ttiMs": 10019.56 }, { "ttiMs": 7759.82 }, { "ttiMs": 8816.86 }, { "ttiMs": 6938.34 }, { "ttiMs": 9361.42 }, { "ttiMs": 6206.28 }, { "ttiMs": 7299.37 }, { "ttiMs": 7549.72 }, { "ttiMs": 4698.66 }, { "ttiMs": 10878.44 }, { "ttiMs": 6626.86 }, { "ttiMs": 5921.67 }, { "ttiMs": 6023.03 }, { "ttiMs": 7825.15 }, { "ttiMs": 10647.26 }, { "ttiMs": 6870.7 }, { "ttiMs": 11226.41 }, { "ttiMs": 8419.11 }, { "ttiMs": 10923.87 }, { "ttiMs": 5256.94 }, { "ttiMs": 6538.85 }, { "ttiMs": 7274.79 }, { "ttiMs": 7229.74 }, { "ttiMs": 12192.26 }, { "ttiMs": 8519.23 }, { "ttiMs": 8294.3 }, { "ttiMs": 10234.44 }, { "ttiMs": 8696.81 }, { "ttiMs": 7912.33 }, { "ttiMs": 11474.89 }, { "ttiMs": 5656.42 }, { "ttiMs": 6713.38 }, { "ttiMs": 9788.51 }, { "ttiMs": 6403.15 }, { "ttiMs": 11223.54 }, { "ttiMs": 8452.4 }, { "ttiMs": 6468.75 }, { "ttiMs": 7130.75 }, { "ttiMs": 11515.21 }, { "ttiMs": 6348.46 }, { "ttiMs": 9533.19 }, { "ttiMs": 9104.64 }, { "ttiMs": 8949.35 }, { "ttiMs": 7799.6 }, { "ttiMs": 10665.57 } ], "summary": { "ttiMs": { "median": 7812.37, "p95": 11474.89, "p99": 12166.88 } }, "compositeScore": 13.13, "successRate": 1 }, { "provider": "createos", "mode": "concurrent", "concurrency": 100, "wallClockMs": 211.33, "timeToFirstReadyMs": 133.31, "iterations": [ { "ttiMs": 133.31 }, { "ttiMs": 176.83 }, { "ttiMs": 174.43 }, { "ttiMs": 186.53 }, { "ttiMs": 174.14 }, { "ttiMs": 182.3 }, { "ttiMs": 157.22 }, { "ttiMs": 192.57 }, { "ttiMs": 178.17 }, { "ttiMs": 183.8 }, { "ttiMs": 166.53 }, { "ttiMs": 184.14 }, { "ttiMs": 156.26 }, { "ttiMs": 187.65 }, { "ttiMs": 149.33 }, { "ttiMs": 165.93 }, { "ttiMs": 166.2 }, { "ttiMs": 182.61 }, { "ttiMs": 193.35 }, { "ttiMs": 177.89 }, { "ttiMs": 211.33 }, { "ttiMs": 177.55 }, { "ttiMs": 208.57 }, { "ttiMs": 165.14 }, { "ttiMs": 184.36 }, { "ttiMs": 166.3 }, { "ttiMs": 188.61 }, { "ttiMs": 156 }, { "ttiMs": 193.71 }, { "ttiMs": 174.1 }, { "ttiMs": 147.99 }, { "ttiMs": 183.18 }, { "ttiMs": 176.31 }, { "ttiMs": 163.52 }, { "ttiMs": 153.09 }, { "ttiMs": 185.28 }, { "ttiMs": 177.63 }, { "ttiMs": 165.6 }, { "ttiMs": 161.1 }, { "ttiMs": 165.21 }, { "ttiMs": 163.24 }, { "ttiMs": 178.89 }, { "ttiMs": 184.57 }, { "ttiMs": 158.36 }, { "ttiMs": 149.88 }, { "ttiMs": 184.16 }, { "ttiMs": 188.9 }, { "ttiMs": 164.85 }, { "ttiMs": 167.81 }, { "ttiMs": 153.93 }, { "ttiMs": 170.96 }, { "ttiMs": 184.03 }, { "ttiMs": 187.78 }, { "ttiMs": 178.05 }, { "ttiMs": 165.26 }, { "ttiMs": 183.71 }, { "ttiMs": 173.55 }, { "ttiMs": 195.28 }, { "ttiMs": 177.2 }, { "ttiMs": 179.19 }, { "ttiMs": 184.35 }, { "ttiMs": 151.92 }, { "ttiMs": 176.88 }, { "ttiMs": 155.27 }, { "ttiMs": 184.76 }, { "ttiMs": 198.47 }, { "ttiMs": 134.33 }, { "ttiMs": 147.46 }, { "ttiMs": 182.17 }, { "ttiMs": 162.88 }, { "ttiMs": 160.18 }, { "ttiMs": 190.81 }, { "ttiMs": 171 }, { "ttiMs": 182.69 }, { "ttiMs": 183.22 }, { "ttiMs": 167.28 }, { "ttiMs": 178.08 }, { "ttiMs": 153.48 }, { "ttiMs": 182.45 }, { "ttiMs": 192.91 }, { "ttiMs": 184.89 }, { "ttiMs": 159.95 }, { "ttiMs": 156.55 }, { "ttiMs": 161.02 }, { "ttiMs": 178.9 }, { "ttiMs": 169.35 }, { "ttiMs": 200.92 }, { "ttiMs": 190.9 }, { "ttiMs": 183.02 }, { "ttiMs": 188.89 }, { "ttiMs": 187.85 }, { "ttiMs": 157.94 }, { "ttiMs": 164.42 }, { "ttiMs": 194.65 }, { "ttiMs": 161.28 }, { "ttiMs": 197.89 }, { "ttiMs": 208.35 }, { "ttiMs": 174.01 }, { "ttiMs": 185.83 }, { "ttiMs": 150.82 } ], "summary": { "ttiMs": { "median": 177.38, "p95": 193.35, "p99": 197.89 } }, "compositeScore": 98.16, "successRate": 1 }, { "provider": "daytona", "mode": "concurrent", "concurrency": 100, "wallClockMs": 623.08, "timeToFirstReadyMs": 220.51, "iterations": [ { "ttiMs": 272.26 }, { "ttiMs": 282.05 }, { "ttiMs": 285.24 }, { "ttiMs": 220.51 }, { "ttiMs": 250.6 }, { "ttiMs": 335.08 }, { "ttiMs": 326.97 }, { "ttiMs": 428.95 }, { "ttiMs": 398.24 }, { "ttiMs": 284.37 }, { "ttiMs": 447.93 }, { "ttiMs": 318.96 }, { "ttiMs": 340.29 }, { "ttiMs": 343.69 }, { "ttiMs": 418.18 }, { "ttiMs": 394.35 }, { "ttiMs": 262.29 }, { "ttiMs": 370.49 }, { "ttiMs": 462.17 }, { "ttiMs": 271.97 }, { "ttiMs": 340.58 }, { "ttiMs": 409.11 }, { "ttiMs": 505.34 }, { "ttiMs": 515.18 }, { "ttiMs": 336.39 }, { "ttiMs": 444.3 }, { "ttiMs": 460.57 }, { "ttiMs": 465.09 }, { "ttiMs": 589.35 }, { "ttiMs": 402.28 }, { "ttiMs": 460.89 }, { "ttiMs": 273.88 }, { "ttiMs": 345.28 }, { "ttiMs": 336 }, { "ttiMs": 327.78 }, { "ttiMs": 333.68 }, { "ttiMs": 438.71 }, { "ttiMs": 231.21 }, { "ttiMs": 328.31 }, { "ttiMs": 223.64 }, { "ttiMs": 427.86 }, { "ttiMs": 251.88 }, { "ttiMs": 332.54 }, { "ttiMs": 456.37 }, { "ttiMs": 260.48 }, { "ttiMs": 287.46 }, { "ttiMs": 257.29 }, { "ttiMs": 297.83 }, { "ttiMs": 221.37 }, { "ttiMs": 325.34 }, { "ttiMs": 429.64 }, { "ttiMs": 403.26 }, { "ttiMs": 538.12 }, { "ttiMs": 414.41 }, { "ttiMs": 283.53 }, { "ttiMs": 400.08 }, { "ttiMs": 539.94 }, { "ttiMs": 352.46 }, { "ttiMs": 248.09 }, { "ttiMs": 404.73 }, { "ttiMs": 245.88 }, { "ttiMs": 237.49 }, { "ttiMs": 431.95 }, { "ttiMs": 399.14 }, { "ttiMs": 474.12 }, { "ttiMs": 561.86 }, { "ttiMs": 263.29 }, { "ttiMs": 312.79 }, { "ttiMs": 430.38 }, { "ttiMs": 302.22 }, { "ttiMs": 436.73 }, { "ttiMs": 268.14 }, { "ttiMs": 423.07 }, { "ttiMs": 348.34 }, { "ttiMs": 434.94 }, { "ttiMs": 588.06 }, { "ttiMs": 221.78 }, { "ttiMs": 484.49 }, { "ttiMs": 293.75 }, { "ttiMs": 464.47 }, { "ttiMs": 268.83 }, { "ttiMs": 394.35 }, { "ttiMs": 402.72 }, { "ttiMs": 463.36 }, { "ttiMs": 346.02 }, { "ttiMs": 257.76 }, { "ttiMs": 276.72 }, { "ttiMs": 355.38 }, { "ttiMs": 313.42 }, { "ttiMs": 421.78 }, { "ttiMs": 304.94 }, { "ttiMs": 534.25 }, { "ttiMs": 411.13 }, { "ttiMs": 360.41 }, { "ttiMs": 268.42 }, { "ttiMs": 396.97 }, { "ttiMs": 414.93 }, { "ttiMs": 312.27 }, { "ttiMs": 622.08 }, { "ttiMs": 273.87 } ], "summary": { "ttiMs": { "median": 347.18, "p95": 484.49, "p99": 538.12 } }, "compositeScore": 95.9, "successRate": 1 }, { "provider": "declaw", "mode": "concurrent", "concurrency": 100, "wallClockMs": 451.4, "timeToFirstReadyMs": 258.34, "iterations": [ { "ttiMs": 442.06 }, { "ttiMs": 270.35 }, { "ttiMs": 288.95 }, { "ttiMs": 275.13 }, { "ttiMs": 318.96 }, { "ttiMs": 258.34 }, { "ttiMs": 332.83 }, { "ttiMs": 403.97 }, { "ttiMs": 406.45 }, { "ttiMs": 450.13 }, { "ttiMs": 316.87 }, { "ttiMs": 341.71 }, { "ttiMs": 273.06 }, { "ttiMs": 391.93 }, { "ttiMs": 270.08 }, { "ttiMs": 291.13 }, { "ttiMs": 328.78 }, { "ttiMs": 286.54 }, { "ttiMs": 385.52 }, { "ttiMs": 310.11 }, { "ttiMs": 307.47 }, { "ttiMs": 333.07 }, { "ttiMs": 402.06 }, { "ttiMs": 284.25 }, { "ttiMs": 293.66 }, { "ttiMs": 270.25 }, { "ttiMs": 319.05 }, { "ttiMs": 290.89 }, { "ttiMs": 270.29 }, { "ttiMs": 375.28 }, { "ttiMs": 272.4 }, { "ttiMs": 292.56 }, { "ttiMs": 350.45 }, { "ttiMs": 353.02 }, { "ttiMs": 294.38 }, { "ttiMs": 273.07 }, { "ttiMs": 323.54 }, { "ttiMs": 278.05 }, { "ttiMs": 387.51 }, { "ttiMs": 436.14 }, { "ttiMs": 274.67 }, { "ttiMs": 401.65 }, { "ttiMs": 353.23 }, { "ttiMs": 279.81 }, { "ttiMs": 334.64 }, { "ttiMs": 287.72 }, { "ttiMs": 323.69 }, { "ttiMs": 274.76 }, { "ttiMs": 445.52 }, { "ttiMs": 315.74 }, { "ttiMs": 323.18 }, { "ttiMs": 364.17 }, { "ttiMs": 353.33 }, { "ttiMs": 450.4 }, { "ttiMs": 267.69 }, { "ttiMs": 358.32 }, { "ttiMs": 389.23 }, { "ttiMs": 297.51 }, { "ttiMs": 332.63 }, { "ttiMs": 389.85 }, { "ttiMs": 385.7 }, { "ttiMs": 315.38 }, { "ttiMs": 352.68 }, { "ttiMs": 306.91 }, { "ttiMs": 402.44 }, { "ttiMs": 389.66 }, { "ttiMs": 402.59 }, { "ttiMs": 280.62 }, { "ttiMs": 291 }, { "ttiMs": 434.74 }, { "ttiMs": 350.48 }, { "ttiMs": 352.4 }, { "ttiMs": 405.03 }, { "ttiMs": 338.65 }, { "ttiMs": 333.99 }, { "ttiMs": 330.34 }, { "ttiMs": 305.96 }, { "ttiMs": 313.75 }, { "ttiMs": 389.36 }, { "ttiMs": 405.82 }, { "ttiMs": 385.35 }, { "ttiMs": 357.56 }, { "ttiMs": 449.15 }, { "ttiMs": 401.01 }, { "ttiMs": 386.96 }, { "ttiMs": 386.28 }, { "ttiMs": 328.96 }, { "ttiMs": 373.6 }, { "ttiMs": 357.7 }, { "ttiMs": 388.83 }, { "ttiMs": 391.02 }, { "ttiMs": 410.48 }, { "ttiMs": 375.45 }, { "ttiMs": 393.99 }, { "ttiMs": 419.18 }, { "ttiMs": 401.98 }, { "ttiMs": 401.5 }, { "ttiMs": 401.16 }, { "ttiMs": 375.18 }, { "ttiMs": 380.05 } ], "summary": { "ttiMs": { "median": 350.47, "p95": 406.45, "p99": 436.14 } }, "compositeScore": 96.23, "successRate": 1 }, { "provider": "e2b", "mode": "concurrent", "concurrency": 100, "wallClockMs": 25694.12, "timeToFirstReadyMs": 890.02, "iterations": [ { "ttiMs": 1522.87 }, { "ttiMs": 1486.63 }, { "ttiMs": 1569.83 }, { "ttiMs": 1273.57 }, { "ttiMs": 1227.29 }, { "ttiMs": 1142.39 }, { "ttiMs": 1275.72 }, { "ttiMs": 1215.79 }, { "ttiMs": 1412.81 }, { "ttiMs": 1422.98 }, { "ttiMs": 1407.31 }, { "ttiMs": 1276.15 }, { "ttiMs": 1229.92 }, { "ttiMs": 1190.18 }, { "ttiMs": 1197.57 }, { "ttiMs": 1655.76 }, { "ttiMs": 1217.32 }, { "ttiMs": 1606.27 }, { "ttiMs": 1432.28 }, { "ttiMs": 1259.89 }, { "ttiMs": 1249.72 }, { "ttiMs": 1256.65 }, { "ttiMs": 1282.05 }, { "ttiMs": 1216.74 }, { "ttiMs": 1147.74 }, { "ttiMs": 1271.73 }, { "ttiMs": 1339.49 }, { "ttiMs": 1261 }, { "ttiMs": 940.62 }, { "ttiMs": 1250.33 }, { "ttiMs": 1469.76 }, { "ttiMs": 17942.91 }, { "ttiMs": 1481.96 }, { "ttiMs": 1351.11 }, { "ttiMs": 1546.33 }, { "ttiMs": 1214.44 }, { "ttiMs": 1277.07 }, { "ttiMs": 1360.62 }, { "ttiMs": 1217.7 }, { "ttiMs": 1652.19 }, { "ttiMs": 1498.71 }, { "ttiMs": 1395.83 }, { "ttiMs": 1514.28 }, { "ttiMs": 1647.33 }, { "ttiMs": 1116.36 }, { "ttiMs": 1480.63 }, { "ttiMs": 1521.05 }, { "ttiMs": 1198.39 }, { "ttiMs": 1344.2 }, { "ttiMs": 1242.73 }, { "ttiMs": 1402.28 }, { "ttiMs": 1215 }, { "ttiMs": 1881.71 }, { "ttiMs": 1303.5 }, { "ttiMs": 1228.69 }, { "ttiMs": 1605.11 }, { "ttiMs": 1260.27 }, { "ttiMs": 1310.98 }, { "ttiMs": 14111.54 }, { "ttiMs": 1255.95 }, { "ttiMs": 1197.84 }, { "ttiMs": 1430.92 }, { "ttiMs": 1329.12 }, { "ttiMs": 1288.87 }, { "ttiMs": 1413.93 }, { "ttiMs": 1180.28 }, { "ttiMs": 1181.62 }, { "ttiMs": 1307.27 }, { "ttiMs": 1305.69 }, { "ttiMs": 889.02 }, { "ttiMs": 25693.12 }, { "ttiMs": 1208.23 }, { "ttiMs": 1284.98 }, { "ttiMs": 1390.73 }, { "ttiMs": 4426.46 }, { "ttiMs": 1281.3 }, { "ttiMs": 1299.72 }, { "ttiMs": 1184.99 }, { "ttiMs": 1274.71 }, { "ttiMs": 1597.1 }, { "ttiMs": 1145.13 }, { "ttiMs": 1259.02 }, { "ttiMs": 1396.67 }, { "ttiMs": 1178.53 }, { "ttiMs": 1355.59 }, { "ttiMs": 1198.66 }, { "ttiMs": 1229.08 }, { "ttiMs": 1515.66 }, { "ttiMs": 1340.47 }, { "ttiMs": 1240.85 }, { "ttiMs": 1584.17 }, { "ttiMs": 1179.39 }, { "ttiMs": 1215.83 }, { "ttiMs": 1441.18 }, { "ttiMs": 1358.8 }, { "ttiMs": 1220.33 }, { "ttiMs": 1319.52 }, { "ttiMs": 1155.01 }, { "ttiMs": 1122.42 }, { "ttiMs": 1223.64 } ], "summary": { "ttiMs": { "median": 1283.52, "p95": 1605.11, "p99": 1655.76 } }, "compositeScore": 85.8, "successRate": 1 }, { "provider": "freestyle", "mode": "concurrent", "concurrency": 100, "wallClockMs": 1296.12, "timeToFirstReadyMs": 548.68, "iterations": [ { "ttiMs": 977.34 }, { "ttiMs": 957.68 }, { "ttiMs": 548.68 }, { "ttiMs": 617.34 }, { "ttiMs": 831.4 }, { "ttiMs": 958.88 }, { "ttiMs": 1225.4 }, { "ttiMs": 809.58 }, { "ttiMs": 960.38 }, { "ttiMs": 688.2 }, { "ttiMs": 977.78 }, { "ttiMs": 756.66 }, { "ttiMs": 688.63 }, { "ttiMs": 978.09 }, { "ttiMs": 689.69 }, { "ttiMs": 977.06 }, { "ttiMs": 754.66 }, { "ttiMs": 686.97 }, { "ttiMs": 957.92 }, { "ttiMs": 808.71 }, { "ttiMs": 798.32 }, { "ttiMs": 808.09 }, { "ttiMs": 831.78 }, { "ttiMs": 957.18 }, { "ttiMs": 869.11 }, { "ttiMs": 687.48 }, { "ttiMs": 1225.58 }, { "ttiMs": 685.9 }, { "ttiMs": 688.94 }, { "ttiMs": 1294.48 }, { "ttiMs": 799.16 }, { "ttiMs": 798.72 }, { "ttiMs": 753.7 }, { "ttiMs": 869.62 }, { "ttiMs": 1226.69 }, { "ttiMs": 1294.77 }, { "ttiMs": 755.53 }, { "ttiMs": 1292.43 }, { "ttiMs": 890.66 }, { "ttiMs": 910.37 }, { "ttiMs": 958.18 }, { "ttiMs": 959.53 }, { "ttiMs": 755.81 }, { "ttiMs": 796.84 }, { "ttiMs": 797.48 }, { "ttiMs": 910.86 }, { "ttiMs": 890.15 }, { "ttiMs": 891.37 }, { "ttiMs": 849.44 }, { "ttiMs": 926.6 }, { "ttiMs": 960.09 }, { "ttiMs": 1049.19 }, { "ttiMs": 960.08 }, { "ttiMs": 755.08 }, { "ttiMs": 756.04 }, { "ttiMs": 833.37 }, { "ttiMs": 959 }, { "ttiMs": 850.88 }, { "ttiMs": 909.33 }, { "ttiMs": 869.82 }, { "ttiMs": 820.82 }, { "ttiMs": 1293.8 }, { "ttiMs": 848.5 }, { "ttiMs": 849.86 }, { "ttiMs": 911.12 }, { "ttiMs": 1295.12 }, { "ttiMs": 851.32 }, { "ttiMs": 867.81 }, { "ttiMs": 956.02 }, { "ttiMs": 1090.96 }, { "ttiMs": 870.06 }, { "ttiMs": 832.09 }, { "ttiMs": 892.16 }, { "ttiMs": 888.38 }, { "ttiMs": 870.32 }, { "ttiMs": 1225.58 }, { "ttiMs": 832.31 }, { "ttiMs": 810.35 }, { "ttiMs": 832.8 }, { "ttiMs": 810.06 }, { "ttiMs": 870.56 }, { "ttiMs": 756.6 }, { "ttiMs": 795.61 }, { "ttiMs": 1293 }, { "ttiMs": 1049.37 }, { "ttiMs": 891.59 }, { "ttiMs": 810.65 }, { "ttiMs": 1157.94 }, { "ttiMs": 1024.01 }, { "ttiMs": 1023.64 }, { "ttiMs": 831.71 }, { "ttiMs": 870.86 }, { "ttiMs": 959.04 }, { "ttiMs": 1225.76 }, { "ttiMs": 1226.05 }, { "ttiMs": 889.31 }, { "ttiMs": 1049.69 }, { "ttiMs": 832.45 }, { "ttiMs": 1158.42 }, { "ttiMs": 809.38 } ], "summary": { "ttiMs": { "median": 870.44, "p95": 1225.58, "p99": 1292.43 } }, "compositeScore": 89.77, "successRate": 1 }, { "provider": "givemeanode", "mode": "concurrent", "concurrency": 100, "wallClockMs": 389.65, "timeToFirstReadyMs": 288.31, "iterations": [ { "ttiMs": 332.17 }, { "ttiMs": 287.31 }, { "ttiMs": 363.93 }, { "ttiMs": 338.57 }, { "ttiMs": 359.66 }, { "ttiMs": 350.58 }, { "ttiMs": 358.48 }, { "ttiMs": 337.18 }, { "ttiMs": 358.85 }, { "ttiMs": 349.76 }, { "ttiMs": 334.52 }, { "ttiMs": 345.23 }, { "ttiMs": 344.83 }, { "ttiMs": 372.23 }, { "ttiMs": 369.26 }, { "ttiMs": 343.29 }, { "ttiMs": 336.5 }, { "ttiMs": 346.7 }, { "ttiMs": 374.01 }, { "ttiMs": 355.97 }, { "ttiMs": 347.04 }, { "ttiMs": 345.53 }, { "ttiMs": 357.99 }, { "ttiMs": 366.62 }, { "ttiMs": 348.46 }, { "ttiMs": 346.29 }, { "ttiMs": 340.27 }, { "ttiMs": 359.89 }, { "ttiMs": 362.44 }, { "ttiMs": 350.82 }, { "ttiMs": 335.85 }, { "ttiMs": 371.36 }, { "ttiMs": 347.66 }, { "ttiMs": 342.36 }, { "ttiMs": 367 }, { "ttiMs": 367.72 }, { "ttiMs": 368.4 }, { "ttiMs": 365.1 }, { "ttiMs": 364.38 }, { "ttiMs": 365.81 }, { "ttiMs": 359.02 }, { "ttiMs": 345.82 }, { "ttiMs": 366.14 }, { "ttiMs": 374.23 }, { "ttiMs": 368.01 }, { "ttiMs": 370.53 }, { "ttiMs": 367.29 }, { "ttiMs": 370.18 }, { "ttiMs": 363.93 }, { "ttiMs": 363.17 }, { "ttiMs": 370.85 }, { "ttiMs": 369.74 }, { "ttiMs": 349.85 }, { "ttiMs": 339.53 }, { "ttiMs": 372.7 }, { "ttiMs": 374.85 }, { "ttiMs": 349 }, { "ttiMs": 380.86 }, { "ttiMs": 375.16 }, { "ttiMs": 342.58 }, { "ttiMs": 347.82 }, { "ttiMs": 344.12 }, { "ttiMs": 372.3 }, { "ttiMs": 337.16 }, { "ttiMs": 338.88 }, { "ttiMs": 379.62 }, { "ttiMs": 348.53 }, { "ttiMs": 347.06 }, { "ttiMs": 365.22 }, { "ttiMs": 341.64 }, { "ttiMs": 369.19 }, { "ttiMs": 378.88 }, { "ttiMs": 340.8 }, { "ttiMs": 374.32 }, { "ttiMs": 376.54 }, { "ttiMs": 368.45 }, { "ttiMs": 376.09 }, { "ttiMs": 343.2 }, { "ttiMs": 377.64 }, { "ttiMs": 371.35 }, { "ttiMs": 377.27 }, { "ttiMs": 350.8 }, { "ttiMs": 364.36 }, { "ttiMs": 362.44 }, { "ttiMs": 340.28 }, { "ttiMs": 334.48 }, { "ttiMs": 378.37 }, { "ttiMs": 375.65 }, { "ttiMs": 379.8 }, { "ttiMs": 388.65 }, { "ttiMs": 373.08 }, { "ttiMs": 387.64 }, { "ttiMs": 376.78 }, { "ttiMs": 388.16 }, { "ttiMs": 380.17 }, { "ttiMs": 343.45 }, { "ttiMs": 377.91 }, { "ttiMs": 372.69 }, { "ttiMs": 340.97 }, { "ttiMs": 378.99 } ], "summary": { "ttiMs": { "median": 363.55, "p95": 378.37, "p99": 379.8 } }, "compositeScore": 96.3, "successRate": 1 }, { "provider": "hopx", "iterations": [ { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" } ], "summary": { "ttiMs": { "median": 0, "p95": 0, "p99": 0 } }, "compositeScore": 0, "successRate": 0 }, { "provider": "isorun", "mode": "concurrent", "concurrency": 100, "wallClockMs": 40.1, "timeToFirstReadyMs": 27.58, "iterations": [ { "ttiMs": 29.98 }, { "ttiMs": 35.33 }, { "ttiMs": 29.88 }, { "ttiMs": 31.79 }, { "ttiMs": 37.46 }, { "ttiMs": 35.81 }, { "ttiMs": 35.98 }, { "ttiMs": 33.66 }, { "ttiMs": 36.62 }, { "ttiMs": 35.36 }, { "ttiMs": 33.54 }, { "ttiMs": 33.85 }, { "ttiMs": 27.58 }, { "ttiMs": 34.82 }, { "ttiMs": 29.44 }, { "ttiMs": 32.41 }, { "ttiMs": 33.5 }, { "ttiMs": 34.87 }, { "ttiMs": 30.85 }, { "ttiMs": 31.78 }, { "ttiMs": 27.87 }, { "ttiMs": 36.74 }, { "ttiMs": 29.18 }, { "ttiMs": 32.71 }, { "ttiMs": 29.91 }, { "ttiMs": 36.25 }, { "ttiMs": 30.27 }, { "ttiMs": 31.15 }, { "ttiMs": 27.87 }, { "ttiMs": 37.73 }, { "ttiMs": 28.5 }, { "ttiMs": 31.21 }, { "ttiMs": 33.78 }, { "ttiMs": 35.64 }, { "ttiMs": 31.23 }, { "ttiMs": 33.24 }, { "ttiMs": 30.28 }, { "ttiMs": 35.63 }, { "ttiMs": 33.58 }, { "ttiMs": 33.18 }, { "ttiMs": 28.12 }, { "ttiMs": 35.32 }, { "ttiMs": 27.61 }, { "ttiMs": 31.01 }, { "ttiMs": 31.28 }, { "ttiMs": 34.83 }, { "ttiMs": 35.71 }, { "ttiMs": 31.37 }, { "ttiMs": 28.44 }, { "ttiMs": 34.45 }, { "ttiMs": 29.67 }, { "ttiMs": 33.71 }, { "ttiMs": 31.82 }, { "ttiMs": 35.59 }, { "ttiMs": 30.38 }, { "ttiMs": 35.94 }, { "ttiMs": 28.52 }, { "ttiMs": 36.66 }, { "ttiMs": 30.85 }, { "ttiMs": 32.99 }, { "ttiMs": 31.99 }, { "ttiMs": 35.2 }, { "ttiMs": 30.47 }, { "ttiMs": 35.36 }, { "ttiMs": 33.41 }, { "ttiMs": 35.18 }, { "ttiMs": 32.07 }, { "ttiMs": 33.16 }, { "ttiMs": 33.21 }, { "ttiMs": 34.34 }, { "ttiMs": 33.32 }, { "ttiMs": 32.93 }, { "ttiMs": 30.16 }, { "ttiMs": 34.72 }, { "ttiMs": 35.96 }, { "ttiMs": 38.96 }, { "ttiMs": 32.49 }, { "ttiMs": 36.22 }, { "ttiMs": 30.15 }, { "ttiMs": 35.82 }, { "ttiMs": 31.67 }, { "ttiMs": 33.62 }, { "ttiMs": 36.53 }, { "ttiMs": 33.36 }, { "ttiMs": 34.82 }, { "ttiMs": 38.32 }, { "ttiMs": 35.99 }, { "ttiMs": 33.26 }, { "ttiMs": 31.37 }, { "ttiMs": 34.79 }, { "ttiMs": 32.97 }, { "ttiMs": 33.06 }, { "ttiMs": 32.03 }, { "ttiMs": 33.74 }, { "ttiMs": 33.45 }, { "ttiMs": 39.1 }, { "ttiMs": 31.87 }, { "ttiMs": 37.26 }, { "ttiMs": 32.03 }, { "ttiMs": 32.95 } ], "summary": { "ttiMs": { "median": 33.25, "p95": 36.53, "p99": 37.26 } }, "compositeScore": 99.65, "successRate": 1 }, { "provider": "microsandbox", "mode": "concurrent", "concurrency": 100, "wallClockMs": 119889.56, "timeToFirstReadyMs": 3367.61, "iterations": [ { "ttiMs": 3367.61 }, { "ttiMs": 4844.98 }, { "ttiMs": 7107.49 }, { "ttiMs": 8963.36 }, { "ttiMs": 14038.76 }, { "ttiMs": 16744.51 }, { "ttiMs": 19037.08 }, { "ttiMs": 24078.29 }, { "ttiMs": 25270.43 }, { "ttiMs": 25901.99 }, { "ttiMs": 28667.45 }, { "ttiMs": 31338.77 }, { "ttiMs": 33641.77 }, { "ttiMs": 34249.91 }, { "ttiMs": 36931.1 }, { "ttiMs": 39261.65 }, { "ttiMs": 41313.35 }, { "ttiMs": 43876.21 }, { "ttiMs": 45596.36 }, { "ttiMs": 49002.66 }, { "ttiMs": 51730.21 }, { "ttiMs": 53044.57 }, { "ttiMs": 56648.07 }, { "ttiMs": 58509.83 }, { "ttiMs": 60851.71 }, { "ttiMs": 62134.73 }, { "ttiMs": 64180.15 }, { "ttiMs": 66410.07 }, { "ttiMs": 68551.18 }, { "ttiMs": 71384.05 }, { "ttiMs": 73069.94 }, { "ttiMs": 74174.78 }, { "ttiMs": 76236.43 }, { "ttiMs": 78414.78 }, { "ttiMs": 80018.15 }, { "ttiMs": 82688.72 }, { "ttiMs": 84679.1 }, { "ttiMs": 85808.03 }, { "ttiMs": 88185.47 }, { "ttiMs": 90728.3 }, { "ttiMs": 92517.26 }, { "ttiMs": 93972.87 }, { "ttiMs": 95499.99 }, { "ttiMs": 99435.8 }, { "ttiMs": 99374.82 }, { "ttiMs": 101101.25 }, { "ttiMs": 102110.47 }, { "ttiMs": 106258.8 }, { "ttiMs": 108022.81 }, { "ttiMs": 111403.59 }, { "ttiMs": 114269.8 }, { "ttiMs": 114376.14 }, { "ttiMs": 117242.12 }, { "ttiMs": 118377.34 }, { "ttiMs": 119888.56 }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" }, { "error": "Error" } ], "summary": { "ttiMs": { "median": 66410.07, "p95": 114269.8, "p99": 117242.12 } }, "compositeScore": 0, "successRate": 0.55 }, { "provider": "miosa", "mode": "concurrent", "concurrency": 100, "wallClockMs": 266.94, "timeToFirstReadyMs": 182.58, "iterations": [ { "ttiMs": 266.94 }, { "ttiMs": 184.47 }, { "ttiMs": 192.49 }, { "ttiMs": 193.1 }, { "ttiMs": 227.31 }, { "ttiMs": 193.33 }, { "ttiMs": 191.96 }, { "ttiMs": 258.39 }, { "ttiMs": 221.89 }, { "ttiMs": 222.17 }, { "ttiMs": 185.76 }, { "ttiMs": 182.71 }, { "ttiMs": 266.31 }, { "ttiMs": 264.53 }, { "ttiMs": 244.99 }, { "ttiMs": 193.43 }, { "ttiMs": 244.56 }, { "ttiMs": 251.2 }, { "ttiMs": 241.13 }, { "ttiMs": 184.77 }, { "ttiMs": 183.21 }, { "ttiMs": 222.44 }, { "ttiMs": 243.36 }, { "ttiMs": 181.58 }, { "ttiMs": 245.04 }, { "ttiMs": 244.64 }, { "ttiMs": 245.17 }, { "ttiMs": 182.69 }, { "ttiMs": 196.15 }, { "ttiMs": 191.45 }, { "ttiMs": 184.58 }, { "ttiMs": 192.56 }, { "ttiMs": 183.83 }, { "ttiMs": 184.92 }, { "ttiMs": 192.11 }, { "ttiMs": 226.67 }, { "ttiMs": 191.87 }, { "ttiMs": 250.56 }, { "ttiMs": 251.35 }, { "ttiMs": 240.4 }, { "ttiMs": 247.75 }, { "ttiMs": 249.92 }, { "ttiMs": 185.34 }, { "ttiMs": 184.97 }, { "ttiMs": 256.12 }, { "ttiMs": 241.11 }, { "ttiMs": 249.28 }, { "ttiMs": 221.9 }, { "ttiMs": 249.42 }, { "ttiMs": 243.4 }, { "ttiMs": 243.86 }, { "ttiMs": 225.1 }, { "ttiMs": 226.96 }, { "ttiMs": 247.38 }, { "ttiMs": 185.21 }, { "ttiMs": 226.02 }, { "ttiMs": 227.09 }, { "ttiMs": 251.64 }, { "ttiMs": 190.92 }, { "ttiMs": 190.55 }, { "ttiMs": 265.29 }, { "ttiMs": 244.29 }, { "ttiMs": 251.25 }, { "ttiMs": 256.96 }, { "ttiMs": 220.94 }, { "ttiMs": 224.77 }, { "ttiMs": 183.26 }, { "ttiMs": 183.92 }, { "ttiMs": 194.23 }, { "ttiMs": 185.05 }, { "ttiMs": 181.74 }, { "ttiMs": 191.83 }, { "ttiMs": 192.63 }, { "ttiMs": 191.29 }, { "ttiMs": 182.8 }, { "ttiMs": 248.84 }, { "ttiMs": 221.71 }, { "ttiMs": 256.63 }, { "ttiMs": 250.26 }, { "ttiMs": 183.64 }, { "ttiMs": 194.74 }, { "ttiMs": 226.53 }, { "ttiMs": 184.9 }, { "ttiMs": 192.23 }, { "ttiMs": 184.89 }, { "ttiMs": 183.85 }, { "ttiMs": 225.84 }, { "ttiMs": 226.18 }, { "ttiMs": 222.13 }, { "ttiMs": 184.83 }, { "ttiMs": 243.27 }, { "ttiMs": 265.13 }, { "ttiMs": 221.77 }, { "ttiMs": 182.18 }, { "ttiMs": 191.73 }, { "ttiMs": 221.9 }, { "ttiMs": 254.59 }, { "ttiMs": 225.86 }, { "ttiMs": 182.7 }, { "ttiMs": 223.99 } ], "summary": { "ttiMs": { "median": 222.02, "p95": 254.59, "p99": 258.39 } }, "compositeScore": 97.64, "successRate": 1 }, { "provider": "modal", "mode": "concurrent", "concurrency": 100, "wallClockMs": 2849.26, "timeToFirstReadyMs": 742.58, "iterations": [ { "ttiMs": 957.21 }, { "ttiMs": 942.41 }, { "ttiMs": 823.28 }, { "ttiMs": 739.58 }, { "ttiMs": 925.43 }, { "ttiMs": 867.69 }, { "ttiMs": 892.77 }, { "ttiMs": 933.73 }, { "ttiMs": 911.88 }, { "ttiMs": 778.69 }, { "ttiMs": 895.92 }, { "ttiMs": 909.36 }, { "ttiMs": 869.24 }, { "ttiMs": 935.42 }, { "ttiMs": 919.97 }, { "ttiMs": 882.57 }, { "ttiMs": 896.87 }, { "ttiMs": 875.65 }, { "ttiMs": 888.91 }, { "ttiMs": 867.72 }, { "ttiMs": 862.48 }, { "ttiMs": 979.91 }, { "ttiMs": 859.68 }, { "ttiMs": 888.72 }, { "ttiMs": 948.1 }, { "ttiMs": 970.82 }, { "ttiMs": 841.97 }, { "ttiMs": 913.41 }, { "ttiMs": 860.9 }, { "ttiMs": 918.86 }, { "ttiMs": 735.9 }, { "ttiMs": 955.37 }, { "ttiMs": 925.36 }, { "ttiMs": 849.64 }, { "ttiMs": 832.79 }, { "ttiMs": 886.51 }, { "ttiMs": 862.58 }, { "ttiMs": 878.78 }, { "ttiMs": 2832.26 }, { "ttiMs": 863.28 }, { "ttiMs": 815.47 }, { "ttiMs": 853.32 }, { "ttiMs": 856.3 }, { "ttiMs": 895.38 }, { "ttiMs": 877.98 }, { "ttiMs": 862.92 }, { "ttiMs": 869.65 }, { "ttiMs": 929.54 }, { "ttiMs": 867.69 }, { "ttiMs": 921.41 }, { "ttiMs": 929.2 }, { "ttiMs": 913.46 }, { "ttiMs": 854.87 }, { "ttiMs": 957.66 }, { "ttiMs": 887.77 }, { "ttiMs": 863.94 }, { "ttiMs": 859.09 }, { "ttiMs": 1129.91 }, { "ttiMs": 1456.41 }, { "ttiMs": 1012.5 }, { "ttiMs": 722.32 }, { "ttiMs": 840.2 }, { "ttiMs": 862.32 }, { "ttiMs": 907.3 }, { "ttiMs": 947.39 }, { "ttiMs": 833.25 }, { "ttiMs": 862 }, { "ttiMs": 881.22 }, { "ttiMs": 919.84 }, { "ttiMs": 947.35 }, { "ttiMs": 1174.67 }, { "ttiMs": 959.2 }, { "ttiMs": 900.86 }, { "ttiMs": 1453.72 }, { "ttiMs": 914.71 }, { "ttiMs": 906.56 }, { "ttiMs": 874.57 }, { "ttiMs": 917.23 }, { "ttiMs": 997.07 }, { "ttiMs": 848.85 }, { "ttiMs": 850.65 }, { "ttiMs": 877 }, { "ttiMs": 953.16 }, { "ttiMs": 827.73 }, { "ttiMs": 952.32 }, { "ttiMs": 890.79 }, { "ttiMs": 912.89 }, { "ttiMs": 713.02 }, { "ttiMs": 855.38 }, { "ttiMs": 848.99 }, { "ttiMs": 1099.97 }, { "ttiMs": 909.7 }, { "ttiMs": 835.07 }, { "ttiMs": 844.45 }, { "ttiMs": 1159.18 }, { "ttiMs": 905.9 }, { "ttiMs": 866.05 }, { "ttiMs": 864.07 }, { "ttiMs": 877.3 }, { "ttiMs": 1144.1 } ], "summary": { "ttiMs": { "median": 888.81, "p95": 997.07, "p99": 1144.1 } }, "compositeScore": 90.46, "successRate": 1 }, { "provider": "mosaic", "mode": "concurrent", "concurrency": 100, "wallClockMs": 6818.72, "timeToFirstReadyMs": 1858.05, "iterations": [ { "ttiMs": 5467.33 }, { "ttiMs": 3998.03 }, { "ttiMs": 3964.2 }, { "ttiMs": 5955.16 }, { "ttiMs": 4014.64 }, { "ttiMs": 3943.16 }, { "ttiMs": 3772.6 }, { "ttiMs": 3917.29 }, { "ttiMs": 5959.01 }, { "ttiMs": 3961.46 }, { "ttiMs": 4011.44 }, { "ttiMs": 3984.13 }, { "ttiMs": 4273.48 }, { "ttiMs": 3954.84 }, { "ttiMs": 4040.24 }, { "ttiMs": 6004.08 }, { "ttiMs": 4829.99 }, { "ttiMs": 3972.41 }, { "ttiMs": 3723.72 }, { "ttiMs": 3970.6 }, { "ttiMs": 3987.48 }, { "ttiMs": 3948.94 }, { "ttiMs": 5419.27 }, { "ttiMs": 3729.9 }, { "ttiMs": 5960.75 }, { "ttiMs": 5423.19 }, { "ttiMs": 5445.89 }, { "ttiMs": 3941.34 }, { "ttiMs": 3769.04 }, { "ttiMs": 4015.05 }, { "ttiMs": 5960.47 }, { "ttiMs": 3844.67 }, { "ttiMs": 4840.43 }, { "ttiMs": 6817.72 }, { "ttiMs": 1992.12 }, { "ttiMs": 4791.67 }, { "ttiMs": 5063.14 }, { "ttiMs": 4977.61 }, { "ttiMs": 4819.74 }, { "ttiMs": 6451.37 }, { "ttiMs": 6197.51 }, { "ttiMs": 1876.03 }, { "ttiMs": 6161.62 }, { "ttiMs": 4942.39 }, { "ttiMs": 5076.11 }, { "ttiMs": 4835.92 }, { "ttiMs": 6134.93 }, { "ttiMs": 1978.74 }, { "ttiMs": 1857.05 }, { "ttiMs": 1889.04 }, { "ttiMs": 4943.08 }, { "ttiMs": 4985.61 }, { "ttiMs": 1961.76 }, { "ttiMs": 4954.86 }, { "ttiMs": 1989.81 }, { "ttiMs": 4812.7 }, { "ttiMs": 6562.16 }, { "ttiMs": 4999.98 }, { "ttiMs": 4997.24 }, { "ttiMs": 1948.27 }, { "ttiMs": 4998.48 }, { "ttiMs": 6655.42 }, { "ttiMs": 1921.12 }, { "ttiMs": 6499.46 }, { "ttiMs": 4823.95 }, { "ttiMs": 4978.95 }, { "ttiMs": 4981.42 }, { "ttiMs": 4990.41 }, { "ttiMs": 4815.39 }, { "ttiMs": 6361.83 }, { "ttiMs": 4994.05 }, { "ttiMs": 4989.66 }, { "ttiMs": 5047.9 }, { "ttiMs": 4975.84 }, { "ttiMs": 2189.46 }, { "ttiMs": 4955.61 }, { "ttiMs": 4845.53 }, { "ttiMs": 1983.58 }, { "ttiMs": 6166.97 }, { "ttiMs": 6498.42 }, { "ttiMs": 4996.16 }, { "ttiMs": 3170.33 }, { "ttiMs": 4783.54 }, { "ttiMs": 4983.49 }, { "ttiMs": 1988.99 }, { "ttiMs": 4801.85 }, { "ttiMs": 4814.72 }, { "ttiMs": 1896.99 }, { "ttiMs": 6698.72 }, { "ttiMs": 4627 }, { "ttiMs": 2019.02 }, { "ttiMs": 4976.26 }, { "ttiMs": 4821.31 }, { "ttiMs": 4821.45 }, { "ttiMs": 2035.61 }, { "ttiMs": 6721.37 }, { "ttiMs": 1913.28 }, { "ttiMs": 4948.57 }, { "ttiMs": 6404.05 }, { "ttiMs": 2999.88 } ], "summary": { "ttiMs": { "median": 4822.7, "p95": 6361.83, "p99": 6499.46 } }, "compositeScore": 45.41, "successRate": 1 }, { "provider": "northflank", "mode": "concurrent", "concurrency": 100, "wallClockMs": 29239.25, "timeToFirstReadyMs": 3952.34, "iterations": [ { "ttiMs": 6602.85 }, { "ttiMs": 11989.83 }, { "ttiMs": 15647.85 }, { "ttiMs": 25598.65 }, { "ttiMs": 20461.08 }, { "ttiMs": 5073.21 }, { "ttiMs": 8268.57 }, { "ttiMs": 7526.29 }, { "ttiMs": 17996.02 }, { "ttiMs": 4437.51 }, { "ttiMs": 19676.21 }, { "ttiMs": 9393.92 }, { "ttiMs": 17578.96 }, { "ttiMs": 29177.3 }, { "ttiMs": 6043.1 }, { "ttiMs": 15516.31 }, { "ttiMs": 20909.78 }, { "ttiMs": 8405.59 }, { "ttiMs": 20846.76 }, { "ttiMs": 28426.44 }, { "ttiMs": 20816.21 }, { "ttiMs": 24943.44 }, { "ttiMs": 17055.13 }, { "ttiMs": 11340.2 }, { "ttiMs": 21217.1 }, { "ttiMs": 14247.45 }, { "ttiMs": 7792.96 }, { "ttiMs": 7784.36 }, { "ttiMs": 19688.53 }, { "ttiMs": 6224.17 }, { "ttiMs": 28787.9 }, { "ttiMs": 6319.99 }, { "ttiMs": 4916.91 }, { "ttiMs": 6720.17 }, { "ttiMs": 14116.16 }, { "ttiMs": 12758.8 }, { "ttiMs": 12667.58 }, { "ttiMs": 4994.71 }, { "ttiMs": 14484.12 }, { "ttiMs": 4406.94 }, { "ttiMs": 13108.56 }, { "ttiMs": 26000.26 }, { "ttiMs": 5499.15 }, { "ttiMs": 29238.25 }, { "ttiMs": 5036.8 }, { "ttiMs": 6740.93 }, { "ttiMs": 21291.53 }, { "ttiMs": 28511.31 }, { "ttiMs": 19705.5 }, { "ttiMs": 21019.85 }, { "ttiMs": 21280.07 }, { "ttiMs": 10763.22 }, { "ttiMs": 11288.47 }, { "ttiMs": 19686.64 }, { "ttiMs": 12918.28 }, { "ttiMs": 13095.61 }, { "ttiMs": 17610.51 }, { "ttiMs": 9207.44 }, { "ttiMs": 14796.23 }, { "ttiMs": 12178.81 }, { "ttiMs": 14556.33 }, { "ttiMs": 9677.51 }, { "ttiMs": 17541.06 }, { "ttiMs": 11556.79 }, { "ttiMs": 16282.2 }, { "ttiMs": 14236.06 }, { "ttiMs": 4806.64 }, { "ttiMs": 10443.97 }, { "ttiMs": 28925.2 }, { "ttiMs": 3951.34 }, { "ttiMs": 17722.07 }, { "ttiMs": 17555.66 }, { "ttiMs": 20585.81 }, { "ttiMs": 19154.8 }, { "ttiMs": 4808.37 }, { "ttiMs": 25542.16 }, { "ttiMs": 24996.88 }, { "ttiMs": 17820.75 }, { "ttiMs": 7198.85 }, { "ttiMs": 10476.07 }, { "ttiMs": 14999.39 }, { "ttiMs": 15190.06 }, { "ttiMs": 5170.49 }, { "ttiMs": 12053.85 }, { "ttiMs": 20611.01 }, { "ttiMs": 17629.35 }, { "ttiMs": 9413.21 }, { "ttiMs": 21156.64 }, { "ttiMs": 28465.79 }, { "ttiMs": 8411.34 }, { "ttiMs": 13838.13 }, { "ttiMs": 25924.55 }, { "ttiMs": 4541.34 }, { "ttiMs": 10790.69 }, { "ttiMs": 8976.85 }, { "ttiMs": 12263.89 }, { "ttiMs": 20886.6 }, { "ttiMs": 7892.87 }, { "ttiMs": 17067.68 }, { "ttiMs": 28634.64 } ], "summary": { "ttiMs": { "median": 14241.76, "p95": 25924.55, "p99": 28511.31 } }, "compositeScore": 0, "successRate": 1 }, { "provider": "run-cloud", "mode": "concurrent", "concurrency": 100, "wallClockMs": 39673.29, "timeToFirstReadyMs": 5393.16, "iterations": [ { "ttiMs": 16871.65 }, { "ttiMs": 7776.59 }, { "ttiMs": 6267.77 }, { "ttiMs": 8717.88 }, { "ttiMs": 5635.45 }, { "ttiMs": 5928.37 }, { "ttiMs": 9659.96 }, { "ttiMs": 20060.03 }, { "ttiMs": 18325.83 }, { "ttiMs": 19485.14 }, { "ttiMs": 8242.43 }, { "ttiMs": 23370.92 }, { "ttiMs": 6691.07 }, { "ttiMs": 17466.1 }, { "ttiMs": 23638.51 }, { "ttiMs": 16616.69 }, { "ttiMs": 10411.5 }, { "ttiMs": 27402.07 }, { "ttiMs": 6372.23 }, { "ttiMs": 9278.06 }, { "ttiMs": 6412.72 }, { "ttiMs": 19282.85 }, { "ttiMs": 8256.45 }, { "ttiMs": 11373.48 }, { "ttiMs": 10730.81 }, { "ttiMs": 10721.35 }, { "ttiMs": 6785.47 }, { "ttiMs": 9840.17 }, { "ttiMs": 5392.16 }, { "ttiMs": 19836.57 }, { "ttiMs": 6361.49 }, { "ttiMs": 9827.56 }, { "ttiMs": 5599.19 }, { "ttiMs": 8389.55 }, { "ttiMs": 15837.55 }, { "ttiMs": 18197.59 }, { "ttiMs": 6293.14 }, { "ttiMs": 21579.58 }, { "ttiMs": 21570.16 }, { "ttiMs": 27524.33 }, { "ttiMs": 6785.96 }, { "ttiMs": 14120.56 }, { "ttiMs": 8317.42 }, { "ttiMs": 26943.3 }, { "ttiMs": 22970.38 }, { "ttiMs": 5759.44 }, { "ttiMs": 17375.49 }, { "ttiMs": 19722.11 }, { "ttiMs": 21464.09 }, { "ttiMs": 23929.26 }, { "ttiMs": 15762.62 }, { "ttiMs": 36265.18 }, { "ttiMs": 11155.66 }, { "ttiMs": 18428.33 }, { "ttiMs": 26097.1 }, { "ttiMs": 24882.79 }, { "ttiMs": 6948.06 }, { "ttiMs": 26897.62 }, { "ttiMs": 30914.96 }, { "ttiMs": 22695.49 }, { "ttiMs": 10902.37 }, { "ttiMs": 9981.09 }, { "ttiMs": 18909.72 }, { "ttiMs": 8042.66 }, { "ttiMs": 12914.48 }, { "ttiMs": 12776.33 }, { "ttiMs": 8592 }, { "ttiMs": 12656.94 }, { "ttiMs": 7257.57 }, { "ttiMs": 7328 }, { "ttiMs": 16228.61 }, { "ttiMs": 16459.94 }, { "ttiMs": 9416.21 }, { "ttiMs": 12341.56 }, { "ttiMs": 8134.15 }, { "ttiMs": 7536.88 }, { "ttiMs": 12757.71 }, { "ttiMs": 12515.49 }, { "ttiMs": 13227.04 }, { "ttiMs": 13425.39 }, { "ttiMs": 7426.76 }, { "ttiMs": 13046.7 }, { "ttiMs": 10813 }, { "ttiMs": 16164.8 }, { "ttiMs": 19046.3 }, { "ttiMs": 39672.29 }, { "ttiMs": 7048.25 }, { "ttiMs": 9425.87 }, { "ttiMs": 8543.46 }, { "ttiMs": 20351.24 }, { "ttiMs": 10995.44 }, { "ttiMs": 11585.07 }, { "ttiMs": 25351.72 }, { "ttiMs": 26303.94 }, { "ttiMs": 14775.07 }, { "ttiMs": 32630.74 }, { "ttiMs": 6379.59 }, { "ttiMs": 6820.12 }, { "ttiMs": 15462.84 }, { "ttiMs": 34042.7 } ], "summary": { "ttiMs": { "median": 12707.33, "p95": 26303.94, "p99": 27524.33 } }, "compositeScore": 0, "successRate": 1 }, { "provider": "runloop", "mode": "concurrent", "concurrency": 100, "wallClockMs": 2301.97, "timeToFirstReadyMs": 1079.53, "iterations": [ { "ttiMs": 1177.75 }, { "ttiMs": 1088.22 }, { "ttiMs": 1121.43 }, { "ttiMs": 1131.65 }, { "ttiMs": 1148.95 }, { "ttiMs": 2300.63 }, { "ttiMs": 1140.75 }, { "ttiMs": 1144.81 }, { "ttiMs": 2298.62 }, { "ttiMs": 1144.19 }, { "ttiMs": 1103.47 }, { "ttiMs": 1124.11 }, { "ttiMs": 1080.72 }, { "ttiMs": 1174.44 }, { "ttiMs": 1190.03 }, { "ttiMs": 1163.09 }, { "ttiMs": 1148.33 }, { "ttiMs": 1098.07 }, { "ttiMs": 1147.45 }, { "ttiMs": 1396.81 }, { "ttiMs": 1127.15 }, { "ttiMs": 1187.52 }, { "ttiMs": 1135.14 }, { "ttiMs": 1093.74 }, { "ttiMs": 1132.62 }, { "ttiMs": 1134.02 }, { "ttiMs": 1145.68 }, { "ttiMs": 1127.66 }, { "ttiMs": 1124.3 }, { "ttiMs": 1118.63 }, { "ttiMs": 1167.08 }, { "ttiMs": 1097.6 }, { "ttiMs": 1151.84 }, { "ttiMs": 1131.67 }, { "ttiMs": 1299.39 }, { "ttiMs": 1092.4 }, { "ttiMs": 1087.45 }, { "ttiMs": 1091.77 }, { "ttiMs": 1147.83 }, { "ttiMs": 1302.13 }, { "ttiMs": 1160.86 }, { "ttiMs": 1187.71 }, { "ttiMs": 1124.72 }, { "ttiMs": 1130.81 }, { "ttiMs": 1209.39 }, { "ttiMs": 1117.53 }, { "ttiMs": 1107.97 }, { "ttiMs": 1119.78 }, { "ttiMs": 1167.22 }, { "ttiMs": 1127.83 }, { "ttiMs": 1169.57 }, { "ttiMs": 1095.79 }, { "ttiMs": 1173.47 }, { "ttiMs": 1129.41 }, { "ttiMs": 1138.45 }, { "ttiMs": 1105.53 }, { "ttiMs": 1115.46 }, { "ttiMs": 1143.62 }, { "ttiMs": 1078.53 }, { "ttiMs": 1084.52 }, { "ttiMs": 1172.8 }, { "ttiMs": 1139.45 }, { "ttiMs": 1151.2 }, { "ttiMs": 1302.6 }, { "ttiMs": 1186.72 }, { "ttiMs": 1151.89 }, { "ttiMs": 1148.92 }, { "ttiMs": 1128.85 }, { "ttiMs": 1176.07 }, { "ttiMs": 1086.09 }, { "ttiMs": 1150.92 }, { "ttiMs": 1094.58 }, { "ttiMs": 1109.09 }, { "ttiMs": 1113.29 }, { "ttiMs": 1133.34 }, { "ttiMs": 1086.46 }, { "ttiMs": 1164.27 }, { "ttiMs": 1145.84 }, { "ttiMs": 1110.25 }, { "ttiMs": 1258.57 }, { "ttiMs": 1162.22 }, { "ttiMs": 1115.62 }, { "ttiMs": 1211.33 }, { "ttiMs": 1104.9 }, { "ttiMs": 1129.69 }, { "ttiMs": 1082.28 }, { "ttiMs": 1118.6 }, { "ttiMs": 1157.81 }, { "ttiMs": 1196.85 }, { "ttiMs": 1150.59 }, { "ttiMs": 1205.89 }, { "ttiMs": 1164.45 }, { "ttiMs": 1129.41 }, { "ttiMs": 2300.97 }, { "ttiMs": 1227.04 }, { "ttiMs": 1090.93 }, { "ttiMs": 1150.22 }, { "ttiMs": 1181.46 }, { "ttiMs": 1154 }, { "ttiMs": 1179.98 } ], "summary": { "ttiMs": { "median": 1142.19, "p95": 1211.33, "p99": 1302.13 } }, "compositeScore": 88.17, "successRate": 1 }, { "provider": "sail", "mode": "concurrent", "concurrency": 100, "wallClockMs": 4459.66, "timeToFirstReadyMs": 1639.17, "iterations": [ { "ttiMs": 1653.5 }, { "ttiMs": 3377.84 }, { "ttiMs": 2598.99 }, { "ttiMs": 1732.5 }, { "ttiMs": 2147.89 }, { "ttiMs": 2862.16 }, { "ttiMs": 2005.5 }, { "ttiMs": 2005.23 }, { "ttiMs": 3022.24 }, { "ttiMs": 2963.95 }, { "ttiMs": 3594.78 }, { "ttiMs": 2406.32 }, { "ttiMs": 3121.85 }, { "ttiMs": 1659.56 }, { "ttiMs": 1678.01 }, { "ttiMs": 2351.66 }, { "ttiMs": 1920.19 }, { "ttiMs": 1685.51 }, { "ttiMs": 2842.41 }, { "ttiMs": 1664.06 }, { "ttiMs": 3119.28 }, { "ttiMs": 1920.21 }, { "ttiMs": 1776.2 }, { "ttiMs": 1678.16 }, { "ttiMs": 1721.6 }, { "ttiMs": 1678.23 }, { "ttiMs": 2643.82 }, { "ttiMs": 2251.31 }, { "ttiMs": 2324.4 }, { "ttiMs": 2264.91 }, { "ttiMs": 2236.11 }, { "ttiMs": 2801.02 }, { "ttiMs": 2927.85 }, { "ttiMs": 2998.29 }, { "ttiMs": 1639.17 }, { "ttiMs": 2237.9 }, { "ttiMs": 2583.83 }, { "ttiMs": 2286.35 }, { "ttiMs": 2648.94 }, { "ttiMs": 2007.63 }, { "ttiMs": 2223.39 }, { "ttiMs": 2293.53 }, { "ttiMs": 2001.02 }, { "ttiMs": 1723.3 }, { "ttiMs": 1655.68 }, { "ttiMs": 1642.16 }, { "ttiMs": 2258.32 }, { "ttiMs": 2064.97 }, { "ttiMs": 2117.84 }, { "ttiMs": 3205.36 }, { "ttiMs": 1899.06 }, { "ttiMs": 2467.29 }, { "ttiMs": 2383.27 }, { "ttiMs": 2077.77 }, { "ttiMs": 2013.38 }, { "ttiMs": 2310.51 }, { "ttiMs": 2154.5 }, { "ttiMs": 2729.53 }, { "ttiMs": 2670.4 }, { "ttiMs": 3130.82 }, { "ttiMs": 3420.03 }, { "ttiMs": 2439.18 }, { "ttiMs": 2249.49 }, { "ttiMs": 2676.58 }, { "ttiMs": 1740.05 }, { "ttiMs": 2246.86 }, { "ttiMs": 2660.1 }, { "ttiMs": 2430.74 }, { "ttiMs": 2252.1 }, { "ttiMs": 2088.06 }, { "ttiMs": 3372.07 }, { "ttiMs": 2590.64 }, { "ttiMs": 1737.7 }, { "ttiMs": 2362.28 }, { "ttiMs": 2729.13 }, { "ttiMs": 3567.65 }, { "ttiMs": 3519.79 }, { "ttiMs": 3102.61 }, { "ttiMs": 2425.57 }, { "ttiMs": 3204.17 }, { "ttiMs": 3000.68 }, { "ttiMs": 2998.35 }, { "ttiMs": 2478.1 }, { "ttiMs": 2518.43 }, { "ttiMs": 1881.16 }, { "ttiMs": 3200.6 }, { "ttiMs": 2203.58 }, { "ttiMs": 2442.34 }, { "ttiMs": 3138.43 }, { "ttiMs": 3567.91 }, { "ttiMs": 2888.7 }, { "ttiMs": 4458.66 }, { "ttiMs": 2226.78 }, { "ttiMs": 3014.7 }, { "ttiMs": 2749.53 }, { "ttiMs": 1712.47 }, { "ttiMs": 2239.32 }, { "ttiMs": 2632.04 }, { "ttiMs": 2759.02 }, { "ttiMs": 3119.04 } ], "summary": { "ttiMs": { "median": 2372.77, "p95": 3204.17, "p99": 3420.03 } }, "compositeScore": 72.62, "successRate": 1 }, { "provider": "sandbox0", "mode": "concurrent", "concurrency": 100, "wallClockMs": 16411.09, "timeToFirstReadyMs": 16253.03, "iterations": [ { "error": "unavailable" }, { "error": "unavailable" }, { "ttiMs": 16381.75 }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "ttiMs": 16276.99 }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "ttiMs": 16253.03 }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "internal_error" }, { "error": "internal_error" }, { "error": "internal_error" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "ttiMs": 16411.09 }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "ttiMs": 16253.78 }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" }, { "error": "internal_error" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "unavailable" }, { "error": "internal_error" } ], "summary": { "ttiMs": { "median": 16276.99, "p95": 16411.09, "p99": 16411.09 } }, "compositeScore": 0, "successRate": 0.05 }, { "provider": "superserve", "mode": "concurrent", "concurrency": 100, "wallClockMs": 1289.76, "timeToFirstReadyMs": 322.06, "iterations": [ { "ttiMs": 433.7 }, { "ttiMs": 429.26 }, { "ttiMs": 586.84 }, { "ttiMs": 628.01 }, { "ttiMs": 363.67 }, { "ttiMs": 798.42 }, { "ttiMs": 853.65 }, { "ttiMs": 953 }, { "ttiMs": 524.59 }, { "ttiMs": 496.87 }, { "ttiMs": 411.83 }, { "ttiMs": 902.73 }, { "ttiMs": 531.75 }, { "ttiMs": 526.93 }, { "ttiMs": 427.33 }, { "ttiMs": 561.83 }, { "ttiMs": 1067.71 }, { "ttiMs": 1196.91 }, { "ttiMs": 765.74 }, { "ttiMs": 444.94 }, { "ttiMs": 615.78 }, { "ttiMs": 413.37 }, { "ttiMs": 480.34 }, { "ttiMs": 322.53 }, { "ttiMs": 418 }, { "ttiMs": 630.85 }, { "ttiMs": 784.73 }, { "ttiMs": 753.42 }, { "ttiMs": 430.36 }, { "ttiMs": 448.12 }, { "ttiMs": 458.89 }, { "ttiMs": 583.09 }, { "ttiMs": 427.58 }, { "ttiMs": 431.22 }, { "ttiMs": 565.88 }, { "ttiMs": 848 }, { "ttiMs": 423.77 }, { "ttiMs": 336.31 }, { "ttiMs": 920.25 }, { "ttiMs": 614.93 }, { "ttiMs": 348.5 }, { "ttiMs": 473.01 }, { "ttiMs": 420.81 }, { "ttiMs": 789.18 }, { "ttiMs": 826.08 }, { "ttiMs": 428.33 }, { "ttiMs": 399.86 }, { "ttiMs": 730.41 }, { "ttiMs": 720.02 }, { "ttiMs": 340.63 }, { "ttiMs": 442.79 }, { "ttiMs": 636.29 }, { "ttiMs": 341.25 }, { "ttiMs": 1146.19 }, { "ttiMs": 1199.8 }, { "ttiMs": 417.16 }, { "ttiMs": 342.7 }, { "ttiMs": 639.03 }, { "ttiMs": 424.97 }, { "ttiMs": 639.45 }, { "ttiMs": 750.33 }, { "ttiMs": 716.07 }, { "ttiMs": 714.55 }, { "ttiMs": 785.94 }, { "ttiMs": 439.44 }, { "ttiMs": 418.87 }, { "ttiMs": 1288.76 }, { "ttiMs": 719.23 }, { "ttiMs": 605.78 }, { "ttiMs": 685.3 }, { "ttiMs": 708.64 }, { "ttiMs": 572.41 }, { "ttiMs": 653.55 }, { "ttiMs": 1072.91 }, { "ttiMs": 936.78 }, { "ttiMs": 394.43 }, { "ttiMs": 407.12 }, { "ttiMs": 977.44 }, { "ttiMs": 440.44 }, { "ttiMs": 463.62 }, { "ttiMs": 959.8 }, { "ttiMs": 448.55 }, { "ttiMs": 426.05 }, { "ttiMs": 677.9 }, { "ttiMs": 1180.81 }, { "ttiMs": 581.67 }, { "ttiMs": 771.33 }, { "ttiMs": 904.26 }, { "ttiMs": 855.04 }, { "ttiMs": 321.06 }, { "ttiMs": 626.62 }, { "ttiMs": 420.14 }, { "ttiMs": 939.74 }, { "ttiMs": 934.91 }, { "ttiMs": 757.96 }, { "ttiMs": 804.59 }, { "ttiMs": 1153.96 }, { "ttiMs": 955.01 }, { "ttiMs": 713.54 }, { "ttiMs": 524.56 } ], "summary": { "ttiMs": { "median": 610.35, "p95": 959.8, "p99": 1146.19 } }, "compositeScore": 92.22, "successRate": 1 }, { "provider": "tenki", "mode": "concurrent", "concurrency": 100, "wallClockMs": 1929.52, "timeToFirstReadyMs": 1063.32, "iterations": [ { "ttiMs": 1852.43 }, { "ttiMs": 1104.88 }, { "ttiMs": 1175.67 }, { "ttiMs": 1845.77 }, { "ttiMs": 1727.88 }, { "ttiMs": 1691.04 }, { "ttiMs": 1768.52 }, { "ttiMs": 1726.66 }, { "ttiMs": 1747.04 }, { "ttiMs": 1198.06 }, { "ttiMs": 1217.57 }, { "ttiMs": 1768.27 }, { "ttiMs": 1834.13 }, { "ttiMs": 1123.44 }, { "ttiMs": 1749.55 }, { "ttiMs": 1208.89 }, { "ttiMs": 1726 }, { "ttiMs": 1210.63 }, { "ttiMs": 1175.13 }, { "ttiMs": 1175.72 }, { "ttiMs": 1253.25 }, { "ttiMs": 1799.57 }, { "ttiMs": 1107.87 }, { "ttiMs": 1726.14 }, { "ttiMs": 1850.53 }, { "ttiMs": 1109.07 }, { "ttiMs": 1726.35 }, { "ttiMs": 1173.6 }, { "ttiMs": 1925.39 }, { "ttiMs": 1198.23 }, { "ttiMs": 1267.43 }, { "ttiMs": 1109.63 }, { "ttiMs": 1769.12 }, { "ttiMs": 1873.22 }, { "ttiMs": 1724.63 }, { "ttiMs": 1109.4 }, { "ttiMs": 1176.75 }, { "ttiMs": 1161.33 }, { "ttiMs": 1851.34 }, { "ttiMs": 1165.66 }, { "ttiMs": 1109.82 }, { "ttiMs": 1062.32 }, { "ttiMs": 1726.91 }, { "ttiMs": 1107.31 }, { "ttiMs": 1781.38 }, { "ttiMs": 1747.01 }, { "ttiMs": 1175.75 }, { "ttiMs": 1833.08 }, { "ttiMs": 1207.74 }, { "ttiMs": 1839.36 }, { "ttiMs": 1109.14 }, { "ttiMs": 1741.35 }, { "ttiMs": 1106.91 }, { "ttiMs": 1177.92 }, { "ttiMs": 1207.39 }, { "ttiMs": 1174.71 }, { "ttiMs": 1221.08 }, { "ttiMs": 1175.14 }, { "ttiMs": 1928.52 }, { "ttiMs": 1727.28 }, { "ttiMs": 1747.45 }, { "ttiMs": 1724.24 }, { "ttiMs": 1676.09 }, { "ttiMs": 1107.93 }, { "ttiMs": 1206.84 }, { "ttiMs": 1207.12 }, { "ttiMs": 1864 }, { "ttiMs": 1176.29 }, { "ttiMs": 1872.79 }, { "ttiMs": 1108.59 }, { "ttiMs": 1750.02 }, { "ttiMs": 1850.12 }, { "ttiMs": 1220.31 }, { "ttiMs": 1219.9 }, { "ttiMs": 1768.27 }, { "ttiMs": 1219.68 }, { "ttiMs": 1865.55 }, { "ttiMs": 1123.56 }, { "ttiMs": 1726.55 }, { "ttiMs": 1227.89 }, { "ttiMs": 1890.18 }, { "ttiMs": 1734.43 }, { "ttiMs": 1107.34 }, { "ttiMs": 1174.26 }, { "ttiMs": 1863.71 }, { "ttiMs": 1177.54 }, { "ttiMs": 1863.44 }, { "ttiMs": 1726.35 }, { "ttiMs": 1890.37 }, { "ttiMs": 1849.81 }, { "ttiMs": 1899.17 }, { "ttiMs": 1869.24 }, { "ttiMs": 1853.5 }, { "ttiMs": 1207.35 }, { "ttiMs": 1917.01 }, { "ttiMs": 1747.06 }, { "ttiMs": 1749.42 }, { "ttiMs": 1869.43 }, { "ttiMs": 1768.95 }, { "ttiMs": 1876.62 } ], "summary": { "ttiMs": { "median": 1725.31, "p95": 1869.43, "p99": 1890.18 } }, "compositeScore": 82.14, "successRate": 1 }, { "provider": "tensorlake", "mode": "concurrent", "concurrency": 100, "wallClockMs": 3303.82, "timeToFirstReadyMs": 767.62, "iterations": [ { "ttiMs": 2638.52 }, { "ttiMs": 1055.48 }, { "ttiMs": 1023.17 }, { "ttiMs": 1228.65 }, { "ttiMs": 1228.28 }, { "ttiMs": 1546.66 }, { "ttiMs": 1221.02 }, { "error": "Error" }, { "ttiMs": 2933.82 }, { "ttiMs": 3104.29 }, { "ttiMs": 3048.27 }, { "ttiMs": 1087.02 }, { "ttiMs": 2987.36 }, { "ttiMs": 942.88 }, { "ttiMs": 1264.15 }, { "ttiMs": 2509.24 }, { "ttiMs": 3159.17 }, { "ttiMs": 3158.5 }, { "ttiMs": 1107.09 }, { "ttiMs": 1038.73 }, { "ttiMs": 1118.25 }, { "ttiMs": 1263.3 }, { "ttiMs": 2874.79 }, { "ttiMs": 1039.33 }, { "ttiMs": 1105.92 }, { "ttiMs": 1547.13 }, { "ttiMs": 1228.91 }, { "ttiMs": 2820.59 }, { "ttiMs": 2778.76 }, { "ttiMs": 1056.21 }, { "ttiMs": 2876.27 }, { "ttiMs": 976.17 }, { "ttiMs": 2276 }, { "ttiMs": 3104.75 }, { "ttiMs": 1037.98 }, { "ttiMs": 1272.01 }, { "ttiMs": 2986.56 }, { "ttiMs": 854.19 }, { "ttiMs": 2924.16 }, { "ttiMs": 1690.1 }, { "ttiMs": 1304.08 }, { "ttiMs": 854.86 }, { "ttiMs": 930.78 }, { "error": "Error" }, { "ttiMs": 768.35 }, { "ttiMs": 3019.46 }, { "ttiMs": 3040.5 }, { "ttiMs": 951.63 }, { "ttiMs": 950.83 }, { "ttiMs": 1622.05 }, { "ttiMs": 2242.45 }, { "ttiMs": 2993.96 }, { "ttiMs": 2274.59 }, { "ttiMs": 2394.51 }, { "ttiMs": 2469.88 }, { "ttiMs": 2270.12 }, { "ttiMs": 2250.17 }, { "ttiMs": 2969.68 }, { "ttiMs": 2526.29 }, { "ttiMs": 2271.46 }, { "ttiMs": 3124.52 }, { "ttiMs": 3106.8 }, { "ttiMs": 768.65 }, { "ttiMs": 853.61 }, { "ttiMs": 3104.22 }, { "ttiMs": 2880.14 }, { "ttiMs": 2253.16 }, { "ttiMs": 1083.66 }, { "ttiMs": 3107.11 }, { "ttiMs": 801.98 }, { "ttiMs": 2873.99 }, { "ttiMs": 854.36 }, { "ttiMs": 2289.83 }, { "ttiMs": 2874.86 }, { "ttiMs": 1038.75 }, { "ttiMs": 766.62 }, { "ttiMs": 949.38 }, { "ttiMs": 852.95 }, { "ttiMs": 1038.11 }, { "ttiMs": 2270.61 }, { "ttiMs": 946.81 }, { "ttiMs": 1053.36 }, { "ttiMs": 2381.29 }, { "ttiMs": 1534.96 }, { "ttiMs": 1039.32 }, { "ttiMs": 1106.41 }, { "ttiMs": 3122.62 }, { "ttiMs": 2686.73 }, { "ttiMs": 951.08 }, { "ttiMs": 1727.57 }, { "ttiMs": 2385.74 }, { "ttiMs": 2276.61 }, { "ttiMs": 3302.82 }, { "ttiMs": 3103.37 }, { "ttiMs": 2270.97 }, { "ttiMs": 804.59 }, { "ttiMs": 2633.72 }, { "ttiMs": 2289.32 }, { "ttiMs": 2403.8 }, { "ttiMs": 2241.24 } ], "summary": { "ttiMs": { "median": 2241.84, "p95": 3104.29, "p99": 3122.62 } }, "compositeScore": 72.62, "successRate": 0.98 }, { "provider": "upstash", "mode": "concurrent", "concurrency": 100, "wallClockMs": 9682.46, "timeToFirstReadyMs": 2488.12, "iterations": [ { "ttiMs": 6267.64 }, { "ttiMs": 4972.09 }, { "ttiMs": 5891.69 }, { "ttiMs": 2487.12 }, { "ttiMs": 3722.24 }, { "ttiMs": 3681.1 }, { "ttiMs": 8619.59 }, { "ttiMs": 5130.55 }, { "ttiMs": 9620.76 }, { "ttiMs": 9605.63 }, { "ttiMs": 3974.34 }, { "ttiMs": 7394.89 }, { "ttiMs": 4042.7 }, { "ttiMs": 4042.02 }, { "ttiMs": 6756.54 }, { "ttiMs": 2710.36 }, { "ttiMs": 5332.92 }, { "ttiMs": 5440.84 }, { "ttiMs": 6268.57 }, { "ttiMs": 9659.99 }, { "ttiMs": 8575.46 }, { "ttiMs": 6412.99 }, { "ttiMs": 6433.89 }, { "ttiMs": 4112.85 }, { "ttiMs": 7492.5 }, { "ttiMs": 5330.81 }, { "ttiMs": 7536.91 }, { "ttiMs": 5176.79 }, { "ttiMs": 2618.71 }, { "ttiMs": 4043.13 }, { "ttiMs": 3330.68 }, { "ttiMs": 2981.71 }, { "ttiMs": 3120.98 }, { "ttiMs": 4042.78 }, { "ttiMs": 2893.34 }, { "ttiMs": 9594.16 }, { "ttiMs": 3441.21 }, { "ttiMs": 8573.12 }, { "ttiMs": 7587.34 }, { "ttiMs": 6568.1 }, { "ttiMs": 5331.9 }, { "ttiMs": 9681.46 }, { "ttiMs": 5330.41 }, { "ttiMs": 3720.51 }, { "ttiMs": 7361.86 }, { "ttiMs": 6048.4 }, { "ttiMs": 4566.19 }, { "ttiMs": 8575.54 }, { "ttiMs": 6414.62 }, { "ttiMs": 8118.49 }, { "ttiMs": 7490.51 }, { "ttiMs": 3997.21 }, { "ttiMs": 3812.7 }, { "ttiMs": 9657.22 }, { "ttiMs": 5442.81 }, { "ttiMs": 6413.62 }, { "ttiMs": 5129.87 }, { "ttiMs": 8752.33 }, { "ttiMs": 5204.12 }, { "ttiMs": 8755.93 }, { "ttiMs": 9506.58 }, { "ttiMs": 8684.67 }, { "ttiMs": 6526.14 }, { "ttiMs": 5176.94 }, { "ttiMs": 8620.98 }, { "ttiMs": 7536.13 }, { "ttiMs": 7468.29 }, { "ttiMs": 2944.64 }, { "ttiMs": 7360.78 }, { "ttiMs": 6267.45 }, { "ttiMs": 4239.21 }, { "ttiMs": 7584.45 }, { "ttiMs": 6898 }, { "ttiMs": 4042.06 }, { "ttiMs": 8573.47 }, { "ttiMs": 5688.76 }, { "ttiMs": 8491.66 }, { "ttiMs": 7868.94 }, { "ttiMs": 7351.37 }, { "ttiMs": 8684 }, { "ttiMs": 4132.97 }, { "ttiMs": 6542.84 }, { "ttiMs": 4110.74 }, { "ttiMs": 6458.99 }, { "ttiMs": 8493.09 }, { "ttiMs": 3138.34 }, { "ttiMs": 8493.85 }, { "ttiMs": 3915.85 }, { "ttiMs": 5160.75 }, { "ttiMs": 9619.43 }, { "ttiMs": 6301.75 }, { "ttiMs": 5131.63 }, { "ttiMs": 7586 }, { "ttiMs": 2749.48 }, { "ttiMs": 7140.75 }, { "ttiMs": 7396.77 }, { "ttiMs": 8451.98 }, { "ttiMs": 8573.64 }, { "ttiMs": 9678.94 }, { "ttiMs": 6319.07 } ], "summary": { "ttiMs": { "median": 6366.03, "p95": 8755.93, "p99": 9619.43 } }, "compositeScore": 25.48, "successRate": 1 }, { "provider": "vercel", "mode": "concurrent", "concurrency": 100, "wallClockMs": 7270.74, "timeToFirstReadyMs": 358.6, "iterations": [ { "ttiMs": 511.19 }, { "ttiMs": 404.09 }, { "ttiMs": 452.12 }, { "ttiMs": 587.39 }, { "ttiMs": 1834.96 }, { "ttiMs": 539.72 }, { "ttiMs": 396.25 }, { "ttiMs": 365.32 }, { "ttiMs": 3198.59 }, { "ttiMs": 403.62 }, { "ttiMs": 1011.42 }, { "ttiMs": 442.59 }, { "ttiMs": 530.52 }, { "ttiMs": 764.92 }, { "ttiMs": 513.2 }, { "ttiMs": 475.67 }, { "ttiMs": 359.87 }, { "ttiMs": 424.34 }, { "ttiMs": 1565.74 }, { "ttiMs": 455.62 }, { "ttiMs": 416.57 }, { "ttiMs": 548.63 }, { "ttiMs": 390.17 }, { "ttiMs": 618.7 }, { "ttiMs": 441.35 }, { "ttiMs": 474.26 }, { "ttiMs": 378.48 }, { "ttiMs": 402.49 }, { "ttiMs": 440.83 }, { "ttiMs": 404.72 }, { "ttiMs": 6366.37 }, { "ttiMs": 657.06 }, { "ttiMs": 430.88 }, { "ttiMs": 445.61 }, { "ttiMs": 441.54 }, { "ttiMs": 500.21 }, { "ttiMs": 399.82 }, { "ttiMs": 357.6 }, { "ttiMs": 473.18 }, { "ttiMs": 1133.23 }, { "ttiMs": 444.54 }, { "ttiMs": 545.26 }, { "ttiMs": 1569.54 }, { "ttiMs": 829.57 }, { "ttiMs": 919.43 }, { "ttiMs": 503.73 }, { "ttiMs": 386.57 }, { "ttiMs": 403.01 }, { "ttiMs": 844.61 }, { "ttiMs": 532.81 }, { "ttiMs": 567.93 }, { "ttiMs": 482.27 }, { "ttiMs": 490.09 }, { "ttiMs": 1563.35 }, { "ttiMs": 421.11 }, { "ttiMs": 466.47 }, { "ttiMs": 435.22 }, { "ttiMs": 467.03 }, { "ttiMs": 379.5 }, { "ttiMs": 2271.44 }, { "ttiMs": 608.66 }, { "ttiMs": 2317.88 }, { "ttiMs": 560.3 }, { "ttiMs": 379.91 }, { "ttiMs": 432.13 }, { "ttiMs": 532.89 }, { "ttiMs": 765.19 }, { "ttiMs": 7269.74 }, { "ttiMs": 421.2 }, { "ttiMs": 501.05 }, { "ttiMs": 848.26 }, { "ttiMs": 510.61 }, { "ttiMs": 464.65 }, { "ttiMs": 455.96 }, { "ttiMs": 400.9 }, { "ttiMs": 596.83 }, { "ttiMs": 486.61 }, { "ttiMs": 514.52 }, { "ttiMs": 516.27 }, { "ttiMs": 713.81 }, { "ttiMs": 1408.47 }, { "ttiMs": 505.38 }, { "ttiMs": 483.81 }, { "ttiMs": 484.69 }, { "ttiMs": 505.02 }, { "ttiMs": 1225.47 }, { "ttiMs": 467.64 }, { "ttiMs": 1289.83 }, { "ttiMs": 407.01 }, { "ttiMs": 634.95 }, { "ttiMs": 404.1 }, { "ttiMs": 558.36 }, { "ttiMs": 541.62 }, { "ttiMs": 413.09 }, { "ttiMs": 874.74 }, { "ttiMs": 424.26 }, { "ttiMs": 553.45 }, { "ttiMs": 631.24 }, { "ttiMs": 767.24 }, { "ttiMs": 509.35 } ], "summary": { "ttiMs": { "median": 502.39, "p95": 1408.47, "p99": 1834.96 } }, "compositeScore": 90.71, "successRate": 1 } ] }