[enhancement](schema-change) Support light schema change on hash columns and agg key columns with varchar type to change length
Proposed changes
- Schema change should rebuild distribution info after modifying columns, especially distribution columns. Or it may cause dynamic partition failed when checking distribution columns' equality.
- Support hash key columns to do light schema change. For unique key or dup key columns, could not be enabled temporarily due to some historical reasons. See #39798 .
Thank you for your contribution to Apache Doris. Don't know what should be done next? See How to process your PR
Since 2024-03-18, the Document has been moved to doris-website. See Doris Document.
run buildall
TPC-H: Total hot run time: 39921 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit f9d147b863d14ade252b073697b095255d1df516, data reload: false
------ Round 1 ----------------------------------
q1 17630 4298 4267 4267
q2 2014 178 175 175
q3 11860 1064 1147 1064
q4 10508 727 790 727
q5 7742 2819 2742 2742
q6 221 136 136 136
q7 949 583 590 583
q8 9563 2036 2068 2036
q9 10217 6538 6570 6538
q10 7026 2082 2169 2082
q11 448 246 245 245
q12 391 221 222 221
q13 17775 3011 2995 2995
q14 273 250 234 234
q15 528 495 488 488
q16 509 405 378 378
q17 970 674 690 674
q18 8050 7488 7453 7453
q19 5763 1026 1069 1026
q20 674 327 318 318
q21 5386 4544 4566 4544
q22 1088 1003 995 995
Total cold run time: 119585 ms
Total hot run time: 39921 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4486 4231 4248 4231
q2 369 270 260 260
q3 2926 2825 2814 2814
q4 1987 1774 1739 1739
q5 5617 5579 5551 5551
q6 229 140 137 137
q7 2147 1783 1755 1755
q8 3281 3461 3423 3423
q9 8763 8893 8782 8782
q10 3475 3238 3244 3238
q11 595 525 503 503
q12 844 637 669 637
q13 15973 3215 3164 3164
q14 313 288 279 279
q15 535 493 488 488
q16 519 448 433 433
q17 1834 1550 1538 1538
q18 8113 8072 7721 7721
q19 2649 1640 1641 1640
q20 2210 1907 1901 1901
q21 5550 5336 5233 5233
q22 1156 1052 1083 1052
Total cold run time: 73571 ms
Total hot run time: 56519 ms
TPC-DS: Total hot run time: 191097 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit f9d147b863d14ade252b073697b095255d1df516, data reload: false
query1 1262 889 846 846
query2 6415 1935 1885 1885
query3 10601 3668 3952 3668
query4 60354 23994 23397 23397
query5 5940 501 491 491
query6 502 171 177 171
query7 6470 289 296 289
query8 306 208 203 203
query9 9019 2439 2421 2421
query10 501 274 256 256
query11 18694 15056 15356 15056
query12 155 98 103 98
query13 1590 404 399 399
query14 12637 8220 8347 8220
query15 249 184 187 184
query16 7232 503 490 490
query17 1116 611 595 595
query18 1866 327 321 321
query19 282 153 157 153
query20 127 116 107 107
query21 216 104 103 103
query22 4566 4224 4235 4224
query23 34280 33826 33347 33347
query24 5565 2887 2894 2887
query25 543 403 409 403
query26 699 158 161 158
query27 1806 275 276 275
query28 3917 2038 2031 2031
query29 672 431 432 431
query30 293 154 149 149
query31 962 780 762 762
query32 82 54 57 54
query33 481 297 293 293
query34 868 473 478 473
query35 808 711 722 711
query36 1048 905 924 905
query37 144 81 85 81
query38 3892 3791 3785 3785
query39 1426 1358 1394 1358
query40 216 129 118 118
query41 51 47 45 45
query42 117 98 100 98
query43 507 467 477 467
query44 1091 736 746 736
query45 196 166 167 166
query46 1098 750 732 732
query47 1823 1727 1776 1727
query48 373 306 297 297
query49 779 430 440 430
query50 806 410 414 410
query51 6771 6722 6722 6722
query52 101 91 95 91
query53 255 185 189 185
query54 584 455 544 455
query55 76 74 78 74
query56 269 246 240 240
query57 1139 1045 1073 1045
query58 230 229 228 228
query59 2798 2830 2605 2605
query60 289 273 267 267
query61 98 92 110 92
query62 771 644 659 644
query63 216 187 181 181
query64 4323 1817 1720 1720
query65 3218 3189 3174 3174
query66 710 329 332 329
query67 15372 14855 14805 14805
query68 6247 547 551 547
query69 567 269 277 269
query70 1135 1064 1112 1064
query71 472 279 281 279
query72 8043 2303 1991 1991
query73 789 323 323 323
query74 8963 8774 8809 8774
query75 4523 2701 2734 2701
query76 3792 1034 918 918
query77 733 319 313 313
query78 9932 9163 8892 8892
query79 7890 530 543 530
query80 1385 524 500 500
query81 590 229 226 226
query82 1238 142 139 139
query83 337 151 145 145
query84 275 76 74 74
query85 1661 312 272 272
query86 445 277 294 277
query87 4384 4236 4185 4185
query88 5229 2397 2430 2397
query89 545 285 287 285
query90 2053 203 199 199
query91 128 99 99 99
query92 67 49 50 49
query93 6273 540 540 540
query94 967 286 286 286
query95 354 259 265 259
query96 620 273 275 273
query97 3178 3048 3048 3048
query98 223 219 199 199
query99 1631 1281 1289 1281
Total cold run time: 336532 ms
Total hot run time: 191097 ms
run buildall
TPC-H: Total hot run time: 40106 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 705c51ba4abd9e8ae79ce039a5800a927202a0b5, data reload: false
------ Round 1 ----------------------------------
q1 17679 4348 4325 4325
q2 2027 181 189 181
q3 11850 1011 994 994
q4 10528 780 728 728
q5 7767 2814 2798 2798
q6 231 137 139 137
q7 966 610 590 590
q8 9556 2045 2050 2045
q9 8720 6559 6608 6559
q10 7006 2242 2173 2173
q11 471 247 244 244
q12 395 224 223 223
q13 17772 3012 3025 3012
q14 270 238 229 229
q15 533 495 484 484
q16 479 400 385 385
q17 967 677 665 665
q18 8112 7451 7447 7447
q19 6740 1042 1005 1005
q20 679 331 336 331
q21 5424 4683 4549 4549
q22 1121 1037 1002 1002
Total cold run time: 119293 ms
Total hot run time: 40106 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4497 4270 4261 4261
q2 372 272 264 264
q3 2869 2776 2778 2776
q4 2031 1851 1811 1811
q5 5669 5539 5583 5539
q6 231 138 143 138
q7 2167 1790 1803 1790
q8 3308 3457 3480 3457
q9 8809 8946 8819 8819
q10 3440 3240 3343 3240
q11 631 509 510 509
q12 832 656 654 654
q13 17045 3160 3197 3160
q14 325 295 305 295
q15 531 491 495 491
q16 493 449 440 440
q17 1832 1559 1506 1506
q18 8297 7851 7969 7851
q19 2453 1645 1667 1645
q20 2309 1948 1870 1870
q21 8977 5158 5367 5158
q22 1195 1040 1037 1037
Total cold run time: 78313 ms
Total hot run time: 56711 ms
TPC-DS: Total hot run time: 190693 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 705c51ba4abd9e8ae79ce039a5800a927202a0b5, data reload: false
query1 1272 897 862 862
query2 6363 1887 1865 1865
query3 10736 3934 3869 3869
query4 60950 25506 23057 23057
query5 6073 495 490 490
query6 504 169 175 169
query7 6501 290 283 283
query8 294 197 198 197
query9 9115 2441 2418 2418
query10 493 272 266 266
query11 18520 15057 15399 15057
query12 156 102 98 98
query13 1652 373 380 373
query14 12534 7652 7784 7652
query15 249 173 167 167
query16 7585 495 488 488
query17 1160 595 554 554
query18 2085 299 299 299
query19 286 156 140 140
query20 116 112 116 112
query21 207 104 101 101
query22 4634 4295 4538 4295
query23 34874 33133 33219 33133
query24 5561 2870 2851 2851
query25 531 378 374 374
query26 692 155 157 155
query27 1823 270 273 270
query28 3760 2045 2036 2036
query29 695 403 410 403
query30 229 160 156 156
query31 920 738 753 738
query32 86 55 54 54
query33 475 292 283 283
query34 865 461 490 461
query35 818 726 711 711
query36 1021 954 903 903
query37 137 79 80 79
query38 3972 3886 3797 3797
query39 1475 1370 1388 1370
query40 205 118 116 116
query41 47 50 45 45
query42 116 97 95 95
query43 508 459 475 459
query44 1054 731 740 731
query45 194 164 170 164
query46 1094 743 735 735
query47 1814 1812 1786 1786
query48 353 288 290 288
query49 746 441 434 434
query50 792 402 399 399
query51 6953 6756 6682 6682
query52 105 85 90 85
query53 257 184 182 182
query54 567 483 459 459
query55 79 74 76 74
query56 270 250 249 249
query57 1116 1121 1095 1095
query58 214 219 214 214
query59 3017 2783 2729 2729
query60 293 261 259 259
query61 102 98 94 94
query62 763 658 654 654
query63 210 178 179 178
query64 9028 2317 7568 2317
query65 3167 3172 3126 3126
query66 660 324 332 324
query67 15264 14952 14796 14796
query68 4796 554 556 554
query69 426 260 271 260
query70 1183 1080 1105 1080
query71 422 275 268 268
query72 6994 2275 2056 2056
query73 725 329 323 323
query74 9239 8710 8816 8710
query75 3417 2656 2667 2656
query76 2791 1013 973 973
query77 546 361 302 302
query78 9804 9083 8973 8973
query79 3304 527 530 527
query80 2598 486 485 485
query81 579 223 220 220
query82 757 144 134 134
query83 303 145 144 144
query84 265 79 80 79
query85 1662 284 303 284
query86 470 283 287 283
query87 4564 4254 4133 4133
query88 4861 2390 2421 2390
query89 411 286 286 286
query90 1846 192 191 191
query91 171 93 97 93
query92 72 48 50 48
query93 4606 542 536 536
query94 818 286 305 286
query95 350 264 267 264
query96 598 278 269 269
query97 3186 3059 3064 3059
query98 225 205 200 200
query99 1641 1272 1291 1272
Total cold run time: 332037 ms
Total hot run time: 190693 ms
ClickBench: Total hot run time: 30.39 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 705c51ba4abd9e8ae79ce039a5800a927202a0b5, data reload: false
query1 0.05 0.04 0.04
query2 0.08 0.04 0.05
query3 0.22 0.04 0.05
query4 1.69 0.08 0.07
query5 0.50 0.49 0.50
query6 1.12 0.72 0.73
query7 0.02 0.01 0.02
query8 0.05 0.04 0.04
query9 0.54 0.50 0.48
query10 0.54 0.53 0.54
query11 0.16 0.11 0.11
query12 0.14 0.12 0.12
query13 0.61 0.62 0.59
query14 0.77 0.78 0.77
query15 0.85 0.83 0.82
query16 0.36 0.37 0.37
query17 1.04 0.96 1.02
query18 0.23 0.22 0.22
query19 1.81 1.70 1.90
query20 0.02 0.01 0.01
query21 15.40 0.75 0.67
query22 3.47 7.92 1.59
query23 18.30 1.38 1.28
query24 2.10 0.22 0.21
query25 0.15 0.09 0.09
query26 0.30 0.22 0.21
query27 0.46 0.23 0.24
query28 13.27 1.01 0.99
query29 12.61 3.37 3.33
query30 0.24 0.05 0.04
query31 2.90 0.40 0.39
query32 3.28 0.49 0.48
query33 2.93 2.97 3.00
query34 17.04 4.36 4.38
query35 4.47 4.45 4.40
query36 0.66 0.45 0.48
query37 0.18 0.16 0.15
query38 0.15 0.15 0.15
query39 0.04 0.03 0.04
query40 0.14 0.13 0.12
query41 0.10 0.05 0.04
query42 0.06 0.05 0.04
query43 0.05 0.05 0.04
Total cold run time: 109.1 s
Total hot run time: 30.39 s
run cloud_p0
run cloud_p0
run buildall
TPC-H: Total hot run time: 38225 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit e18bfd7dc86415d43e0de3f29e3ceb6aad976e88, data reload: false
------ Round 1 ----------------------------------
q1 18562 4530 4412 4412
q2 2560 209 212 209
q3 11408 1165 1103 1103
q4 10994 776 780 776
q5 8200 2937 2842 2842
q6 264 159 160 159
q7 1019 675 668 668
q8 9409 2143 2066 2066
q9 7125 6566 6576 6566
q10 7060 2171 2253 2171
q11 501 275 275 275
q12 440 264 261 261
q13 18097 3008 3023 3008
q14 297 269 254 254
q15 549 518 512 512
q16 529 402 399 399
q17 983 766 646 646
q18 7561 6682 6732 6682
q19 7690 999 1011 999
q20 708 338 362 338
q21 3797 3022 2870 2870
q22 1125 1009 1022 1009
Total cold run time: 118878 ms
Total hot run time: 38225 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4474 4278 4324 4278
q2 397 300 293 293
q3 2889 2601 2613 2601
q4 1916 1616 1598 1598
q5 5376 5390 5374 5374
q6 236 144 147 144
q7 2080 1745 1705 1705
q8 3166 3367 3649 3367
q9 8425 8379 8399 8379
q10 3417 3175 3202 3175
q11 620 530 540 530
q12 830 622 653 622
q13 17396 3016 3007 3007
q14 316 297 288 288
q15 566 518 543 518
q16 511 457 465 457
q17 1797 1504 1466 1466
q18 7629 7490 7319 7319
q19 1867 1610 1519 1519
q20 2066 1840 1841 1840
q21 5245 5138 5104 5104
q22 1174 1022 1034 1022
Total cold run time: 72393 ms
Total hot run time: 54606 ms
TPC-DS: Total hot run time: 192105 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit e18bfd7dc86415d43e0de3f29e3ceb6aad976e88, data reload: false
query1 985 401 388 388
query2 6732 2048 1944 1944
query3 6702 247 261 247
query4 29179 23256 23249 23249
query5 4430 739 711 711
query6 315 220 220 220
query7 4627 343 329 329
query8 491 439 434 434
query9 8635 2559 2538 2538
query10 510 364 350 350
query11 17790 15108 15063 15063
query12 194 137 144 137
query13 1705 441 437 437
query14 9747 7615 7697 7615
query15 318 196 190 190
query16 7838 535 467 467
query17 1664 611 596 596
query18 1466 333 334 333
query19 356 170 173 170
query20 141 139 135 135
query21 252 146 143 143
query22 4312 4064 3974 3974
query23 34010 33380 34364 33380
query24 11523 3002 2909 2909
query25 559 427 418 418
query26 730 188 186 186
query27 2032 301 303 301
query28 6143 2169 2150 2150
query29 690 469 448 448
query30 374 195 188 188
query31 1084 843 856 843
query32 122 82 83 82
query33 834 352 353 352
query34 932 509 516 509
query35 890 764 777 764
query36 1138 966 967 966
query37 158 104 107 104
query38 4012 3864 3813 3813
query39 1526 1473 1481 1473
query40 238 158 157 157
query41 144 141 138 138
query42 141 118 122 118
query43 560 517 518 517
query44 1284 783 805 783
query45 225 193 196 193
query46 1143 767 805 767
query47 1894 1817 1861 1817
query48 410 344 336 336
query49 1177 591 594 591
query50 889 485 470 470
query51 7327 7001 7146 7001
query52 121 113 114 113
query53 311 233 230 230
query54 1053 510 508 508
query55 91 93 91 91
query56 337 316 314 314
query57 1187 1112 1144 1112
query58 312 317 323 317
query59 2919 2853 2736 2736
query60 363 341 332 332
query61 151 149 151 149
query62 900 722 720 720
query63 275 230 238 230
query64 5110 2422 1887 1887
query65 3276 3379 3223 3223
query66 1114 685 680 680
query67 15547 14774 15098 14774
query68 4734 586 604 586
query69 673 373 334 334
query70 1208 1208 1153 1153
query71 490 321 333 321
query72 7375 2465 2094 2094
query73 822 365 361 361
query74 9168 8885 8972 8885
query75 3890 2774 2778 2774
query76 3313 1014 1018 1014
query77 867 463 446 446
query78 9993 9102 10036 9102
query79 5199 565 577 565
query80 1438 642 626 626
query81 631 263 266 263
query82 933 167 160 160
query83 421 223 226 223
query84 295 108 99 99
query85 1710 370 362 362
query86 490 332 322 322
query87 4462 4299 4218 4218
query88 4157 2462 2467 2462
query89 480 331 323 323
query90 2026 239 240 239
query91 161 129 135 129
query92 93 79 76 76
query93 5204 567 554 554
query94 998 322 321 321
query95 401 302 308 302
query96 613 293 299 293
query97 3269 3082 3081 3081
query98 261 230 231 230
query99 1558 1332 1327 1327
Total cold run time: 300978 ms
Total hot run time: 192105 ms
ClickBench: Total hot run time: 30.5 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit e18bfd7dc86415d43e0de3f29e3ceb6aad976e88, data reload: false
query1 0.05 0.04 0.04
query2 0.08 0.04 0.04
query3 0.23 0.07 0.05
query4 1.64 0.08 0.08
query5 0.49 0.49 0.50
query6 1.14 0.74 0.73
query7 0.02 0.01 0.02
query8 0.06 0.04 0.05
query9 0.56 0.48 0.49
query10 0.54 0.54 0.54
query11 0.16 0.13 0.12
query12 0.15 0.14 0.13
query13 0.62 0.59 0.59
query14 0.77 0.80 0.80
query15 0.83 0.82 0.82
query16 0.37 0.35 0.37
query17 0.99 0.98 1.06
query18 0.21 0.22 0.21
query19 1.78 1.67 1.80
query20 0.02 0.01 0.01
query21 15.43 0.67 0.65
query22 3.87 8.01 1.51
query23 18.28 1.39 1.30
query24 2.12 0.27 0.22
query25 0.15 0.10 0.09
query26 0.28 0.19 0.18
query27 0.09 0.08 0.07
query28 13.20 1.04 1.01
query29 12.70 3.29 3.26
query30 0.43 0.24 0.24
query31 2.80 0.41 0.41
query32 3.24 0.49 0.48
query33 2.94 2.96 2.97
query34 17.22 4.30 4.38
query35 4.43 4.50 4.42
query36 0.67 0.47 0.49
query37 0.20 0.17 0.18
query38 0.17 0.17 0.17
query39 0.07 0.06 0.06
query40 0.19 0.15 0.15
query41 0.12 0.06 0.06
query42 0.08 0.07 0.07
query43 0.07 0.07 0.07
Total cold run time: 109.46 s
Total hot run time: 30.5 s
run buildall
TPC-H: Total hot run time: 38258 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit f5f103eda81e51ed94622476d1ce325688d3b741, data reload: false
------ Round 1 ----------------------------------
q1 17862 4410 4313 4313
q2 2047 216 218 216
q3 11787 976 1151 976
q4 10548 841 820 820
q5 7762 2830 2768 2768
q6 264 157 161 157
q7 1032 672 670 670
q8 9578 2079 2092 2079
q9 7898 6551 6499 6499
q10 7030 2265 2258 2258
q11 514 277 270 270
q12 439 261 261 261
q13 17774 3020 3031 3020
q14 314 265 249 249
q15 565 528 541 528
q16 521 420 414 414
q17 1010 667 715 667
q18 7341 6835 6789 6789
q19 7125 1076 1157 1076
q20 747 362 366 362
q21 3890 3056 2823 2823
q22 1116 1043 1056 1043
Total cold run time: 117164 ms
Total hot run time: 38258 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4517 4342 4314 4314
q2 417 314 311 311
q3 2837 2687 2719 2687
q4 2006 1734 1693 1693
q5 5649 5681 5574 5574
q6 242 150 157 150
q7 2172 1835 1754 1754
q8 3328 3536 3457 3457
q9 8720 8741 8783 8741
q10 3621 3405 3319 3319
q11 661 531 540 531
q12 849 676 652 652
q13 17180 3119 3081 3081
q14 338 306 309 306
q15 582 522 523 522
q16 523 454 462 454
q17 1872 1579 1521 1521
q18 8133 7803 7907 7803
q19 7667 1601 1498 1498
q20 2182 1917 1895 1895
q21 14866 5304 5311 5304
q22 1175 1097 1110 1097
Total cold run time: 89537 ms
Total hot run time: 56664 ms
TPC-DS: Total hot run time: 197350 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit f5f103eda81e51ed94622476d1ce325688d3b741, data reload: false
query1 1337 896 891 891
query2 6760 2032 1903 1903
query3 10650 3926 3955 3926
query4 57895 23846 23220 23220
query5 6089 737 719 719
query6 552 253 229 229
query7 6448 343 323 323
query8 536 449 445 445
query9 9571 2567 2516 2516
query10 609 352 330 330
query11 18674 15089 15472 15089
query12 197 128 136 128
query13 1673 434 435 434
query14 12419 7408 7452 7408
query15 264 193 199 193
query16 7861 517 551 517
query17 1208 632 617 617
query18 2196 359 350 350
query19 306 194 176 176
query20 157 143 137 137
query21 248 141 140 140
query22 4842 4482 4520 4482
query23 34308 33844 33821 33821
query24 5658 2954 3063 2954
query25 603 422 442 422
query26 718 184 184 184
query27 1865 314 317 314
query28 4019 2200 2188 2188
query29 776 458 452 452
query30 252 186 189 186
query31 1057 823 826 823
query32 125 77 78 77
query33 566 374 344 344
query34 894 505 507 505
query35 855 778 771 771
query36 1114 970 970 970
query37 154 104 103 103
query38 4057 3887 3924 3887
query39 1553 1584 1476 1476
query40 236 154 154 154
query41 138 135 140 135
query42 134 119 126 119
query43 535 511 501 501
query44 1117 792 792 792
query45 225 195 194 194
query46 1122 787 805 787
query47 1915 1833 1841 1833
query48 407 350 332 332
query49 908 591 584 584
query50 866 475 460 460
query51 7135 7161 7026 7026
query52 121 106 109 106
query53 305 222 223 222
query54 607 507 504 504
query55 94 88 88 88
query56 334 311 316 311
query57 1214 1130 1127 1127
query58 304 310 303 303
query59 2920 2708 2717 2708
query60 356 347 330 330
query61 146 144 161 144
query62 810 690 679 679
query63 251 227 223 223
query64 4403 2387 3801 2387
query65 3237 3177 3178 3177
query66 1051 682 667 667
query67 15461 15105 15008 15008
query68 7242 594 595 594
query69 655 417 337 337
query70 1241 1177 1167 1167
query71 554 312 306 306
query72 6735 2338 2094 2094
query73 802 355 357 355
query74 9326 8846 8843 8843
query75 4121 2742 2709 2709
query76 4167 1039 948 948
query77 863 455 459 455
query78 9984 9232 9040 9040
query79 6638 567 558 558
query80 1530 611 617 611
query81 602 262 261 261
query82 643 168 159 159
query83 289 216 217 216
query84 298 95 102 95
query85 885 359 356 356
query86 360 331 333 331
query87 4381 4127 4220 4127
query88 3666 2451 2445 2445
query89 572 322 327 322
query90 2084 228 232 228
query91 156 127 127 127
query92 92 76 75 75
query93 4705 550 548 548
query94 752 320 299 299
query95 386 294 306 294
query96 622 284 286 284
query97 3237 3074 3092 3074
query98 245 238 227 227
query99 1513 1318 1314 1314
Total cold run time: 334764 ms
Total hot run time: 197350 ms
ClickBench: Total hot run time: 30.7 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit f5f103eda81e51ed94622476d1ce325688d3b741, data reload: false
query1 0.05 0.05 0.04
query2 0.08 0.04 0.05
query3 0.22 0.05 0.06
query4 1.66 0.08 0.07
query5 0.50 0.49 0.50
query6 1.12 0.73 0.74
query7 0.02 0.01 0.02
query8 0.06 0.05 0.04
query9 0.54 0.48 0.48
query10 0.56 0.55 0.54
query11 0.16 0.12 0.12
query12 0.15 0.13 0.13
query13 0.62 0.61 0.58
query14 0.77 0.79 0.80
query15 0.84 0.83 0.84
query16 0.39 0.38 0.37
query17 1.06 1.06 1.05
query18 0.22 0.21 0.21
query19 1.76 1.73 1.77
query20 0.02 0.01 0.02
query21 15.39 0.67 0.67
query22 4.30 7.77 1.50
query23 18.29 1.44 1.34
query24 2.11 0.23 0.23
query25 0.15 0.08 0.08
query26 0.28 0.18 0.18
query27 0.09 0.08 0.08
query28 13.29 1.02 1.02
query29 12.64 3.34 3.30
query30 0.44 0.26 0.24
query31 2.81 0.40 0.40
query32 3.30 0.48 0.48
query33 2.95 2.95 2.96
query34 17.09 4.31 4.33
query35 4.39 4.42 4.44
query36 0.67 0.48 0.51
query37 0.20 0.17 0.17
query38 0.18 0.16 0.16
query39 0.06 0.05 0.05
query40 0.18 0.14 0.15
query41 0.12 0.07 0.07
query42 0.07 0.06 0.06
query43 0.06 0.06 0.06
Total cold run time: 109.86 s
Total hot run time: 30.7 s
run buildall
TPC-H: Total hot run time: 38687 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 3681c3e9bf38fc395d1f6b509aa0df15ea2c8cb2, data reload: false
------ Round 1 ----------------------------------
q1 17981 4472 4281 4281
q2 2056 213 207 207
q3 11674 1026 1159 1026
q4 10543 751 766 751
q5 7784 2898 2827 2827
q6 263 161 162 161
q7 1022 673 665 665
q8 9411 2116 2153 2116
q9 7030 6554 6569 6554
q10 7073 2263 2270 2263
q11 501 279 270 270
q12 448 266 267 266
q13 17801 3052 3064 3052
q14 307 269 266 266
q15 571 522 544 522
q16 558 420 407 407
q17 1003 648 654 648
q18 7404 6864 6848 6848
q19 1438 1154 1109 1109
q20 697 366 356 356
q21 3925 3057 3087 3057
q22 1142 1060 1035 1035
Total cold run time: 110632 ms
Total hot run time: 38687 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4356 4345 4312 4312
q2 415 311 322 311
q3 2896 2650 2634 2634
q4 1992 1715 1701 1701
q5 5694 5685 5680 5680
q6 254 157 165 157
q7 2348 1897 1864 1864
q8 3300 3531 3452 3452
q9 8886 8884 8898 8884
q10 3627 3357 3377 3357
q11 646 540 561 540
q12 896 700 699 699
q13 15945 3229 3212 3212
q14 329 316 336 316
q15 586 542 526 526
q16 544 483 467 467
q17 1819 1524 1540 1524
q18 8180 7917 7811 7811
q19 1839 1583 1693 1583
q20 2151 1937 1915 1915
q21 5754 5516 5521 5516
q22 1204 1118 1104 1104
Total cold run time: 73661 ms
Total hot run time: 57565 ms
TPC-DS: Total hot run time: 198319 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 3681c3e9bf38fc395d1f6b509aa0df15ea2c8cb2, data reload: false
query1 1336 875 892 875
query2 6445 2022 2027 2022
query3 10627 4006 3881 3881
query4 59563 26492 23299 23299
query5 5520 740 725 725
query6 456 216 221 216
query7 5787 326 326 326
query8 524 441 446 441
query9 8823 2574 2517 2517
query10 535 352 348 348
query11 18291 15028 15530 15028
query12 198 148 148 148
query13 1581 461 448 448
query14 11467 7944 7485 7485
query15 269 192 191 191
query16 7563 525 525 525
query17 1168 619 629 619
query18 2071 343 349 343
query19 323 175 176 175
query20 154 156 142 142
query21 245 149 149 149
query22 4610 4547 4481 4481
query23 34752 33844 33974 33844
query24 6151 3029 3039 3029
query25 580 423 437 423
query26 709 185 189 185
query27 1737 317 320 317
query28 3797 2139 2140 2139
query29 747 484 463 463
query30 234 196 203 196
query31 1030 898 864 864
query32 124 79 86 79
query33 521 373 352 352
query34 942 539 536 536
query35 863 769 767 767
query36 1112 979 996 979
query37 179 108 114 108
query38 4058 3826 3877 3826
query39 1531 1521 1479 1479
query40 244 156 154 154
query41 142 158 142 142
query42 134 118 119 118
query43 561 523 503 503
query44 1149 800 803 800
query45 226 197 194 194
query46 1157 767 764 764
query47 1920 1811 1877 1811
query48 416 341 348 341
query49 920 593 596 593
query50 894 475 474 474
query51 7186 7064 7078 7064
query52 118 110 109 109
query53 297 224 222 222
query54 623 514 511 511
query55 95 94 90 90
query56 350 325 332 325
query57 1255 1170 1131 1131
query58 304 309 308 308
query59 3105 2890 2975 2890
query60 372 343 330 330
query61 153 150 146 146
query62 822 714 694 694
query63 264 231 230 230
query64 3445 1850 1832 1832
query65 3260 3251 3195 3195
query66 1016 668 681 668
query67 15319 15178 15236 15178
query68 4377 609 636 609
query69 483 342 326 326
query70 1258 1195 1183 1183
query71 384 326 325 325
query72 6454 2370 2118 2118
query73 797 363 368 363
query74 9169 8942 9052 8942
query75 3493 2765 2795 2765
query76 1607 1023 1103 1023
query77 695 451 449 449
query78 9783 9709 9090 9090
query79 1728 568 568 568
query80 1152 619 633 619
query81 592 270 261 261
query82 318 164 161 161
query83 242 210 212 210
query84 285 101 98 98
query85 965 357 361 357
query86 340 311 329 311
query87 4441 4285 4364 4285
query88 3504 2546 2542 2542
query89 447 327 329 327
query90 1655 237 240 237
query91 161 133 135 133
query92 91 81 79 79
query93 2489 556 555 555
query94 622 333 340 333
query95 395 304 307 304
query96 637 328 292 292
query97 3250 3153 3094 3094
query98 245 230 227 227
query99 1626 1356 1346 1346
Total cold run time: 316055 ms
Total hot run time: 198319 ms
ClickBench: Total hot run time: 30.9 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 3681c3e9bf38fc395d1f6b509aa0df15ea2c8cb2, data reload: false
query1 0.05 0.05 0.04
query2 0.09 0.04 0.04
query3 0.23 0.05 0.06
query4 1.66 0.10 0.08
query5 0.51 0.49 0.49
query6 1.12 0.73 0.73
query7 0.02 0.02 0.02
query8 0.06 0.05 0.05
query9 0.55 0.49 0.48
query10 0.55 0.56 0.56
query11 0.17 0.12 0.12
query12 0.15 0.13 0.14
query13 0.63 0.61 0.59
query14 0.77 0.79 0.79
query15 0.83 0.84 0.82
query16 0.37 0.36 0.38
query17 1.03 1.02 0.99
query18 0.21 0.20 0.21
query19 1.88 1.83 1.71
query20 0.02 0.01 0.01
query21 15.39 0.67 0.66
query22 4.43 6.43 1.64
query23 18.30 1.37 1.28
query24 2.13 0.23 0.23
query25 0.15 0.10 0.09
query26 0.29 0.18 0.18
query27 0.08 0.08 0.08
query28 13.26 1.03 1.01
query29 12.61 3.44 3.42
query30 0.41 0.19 0.20
query31 2.81 0.40 0.39
query32 3.28 0.49 0.49
query33 3.03 2.99 3.03
query34 17.09 4.39 4.37
query35 4.41 4.42 4.44
query36 0.68 0.47 0.49
query37 0.21 0.18 0.17
query38 0.18 0.18 0.16
query39 0.07 0.06 0.06
query40 0.19 0.15 0.15
query41 0.11 0.07 0.08
query42 0.08 0.07 0.06
query43 0.08 0.06 0.07
Total cold run time: 110.17 s
Total hot run time: 30.9 s
run buildall
TPC-H: Total hot run time: 38810 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit e7f7dac02685af4b7afc837546b0b1d9f4a86798, data reload: false
------ Round 1 ----------------------------------
q1 18377 4490 4350 4350
q2 2045 230 202 202
q3 11413 990 1145 990
q4 10530 777 745 745
q5 7780 2865 2830 2830
q6 267 158 162 158
q7 1038 654 647 647
q8 9405 2162 2149 2149
q9 7308 6546 6576 6546
q10 7025 2239 2284 2239
q11 498 270 272 270
q12 431 259 256 256
q13 18954 3038 3024 3024
q14 299 257 254 254
q15 580 536 549 536
q16 536 428 411 411
q17 1014 751 720 720
q18 7336 6910 6939 6910
q19 1458 1210 1157 1157
q20 731 377 372 372
q21 3976 3110 3008 3008
q22 1157 1074 1036 1036
Total cold run time: 112158 ms
Total hot run time: 38810 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4451 4314 4325 4314
q2 418 317 314 314
q3 2926 2729 2677 2677
q4 1937 1702 1760 1702
q5 5658 5685 5757 5685
q6 245 150 150 150
q7 2265 1882 1823 1823
q8 3334 3441 3464 3441
q9 8847 8856 8807 8807
q10 3593 3330 3468 3330
q11 639 553 528 528
q12 923 706 706 706
q13 17212 3278 3227 3227
q14 323 298 291 291
q15 574 515 528 515
q16 508 487 479 479
q17 1842 1584 1555 1555
q18 8264 7923 7706 7706
q19 1815 1446 1583 1446
q20 2209 1904 1932 1904
q21 5745 5393 5412 5393
q22 1209 1093 1103 1093
Total cold run time: 74937 ms
Total hot run time: 57086 ms
TPC-DS: Total hot run time: 197703 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit e7f7dac02685af4b7afc837546b0b1d9f4a86798, data reload: false
query1 1302 904 875 875
query2 6544 1938 1914 1914
query3 10639 3967 3765 3765
query4 59406 27356 23433 23433
query5 5616 741 727 727
query6 463 213 206 206
query7 5800 327 323 323
query8 508 427 429 427
query9 9023 2571 2549 2549
query10 559 376 338 338
query11 17843 15146 15727 15146
query12 182 128 129 128
query13 1622 448 455 448
query14 11208 7745 7567 7567
query15 245 193 193 193
query16 7399 527 522 522
query17 1187 611 641 611
query18 2045 364 338 338
query19 301 171 167 167
query20 157 141 139 139
query21 244 141 138 138
query22 4493 4472 4427 4427
query23 34647 33857 34973 33857
query24 6135 3006 2996 2996
query25 550 428 421 421
query26 681 202 181 181
query27 1788 304 315 304
query28 4005 2192 2152 2152
query29 687 490 464 464
query30 233 190 190 190
query31 1054 844 828 828
query32 99 77 78 77
query33 475 351 348 348
query34 901 497 526 497
query35 882 793 768 768
query36 1099 972 953 953
query37 159 110 106 106
query38 4037 3870 4014 3870
query39 1552 1452 1488 1452
query40 236 153 153 153
query41 138 134 136 134
query42 138 120 117 117
query43 522 498 510 498
query44 1147 797 813 797
query45 225 197 198 197
query46 1162 797 760 760
query47 1970 1865 1837 1837
query48 411 335 347 335
query49 923 613 586 586
query50 880 479 472 472
query51 7350 7028 7181 7028
query52 118 112 106 106
query53 298 224 221 221
query54 624 541 510 510
query55 91 88 90 88
query56 336 322 318 318
query57 1221 1148 1146 1146
query58 293 311 298 298
query59 2924 2765 2856 2765
query60 345 324 334 324
query61 164 148 147 147
query62 792 713 694 694
query63 256 227 231 227
query64 2816 1900 1863 1863
query65 3281 3214 3197 3197
query66 1022 691 675 675
query67 15251 15304 15187 15187
query68 4478 612 608 608
query69 467 323 323 323
query70 1221 1155 1152 1152
query71 410 316 321 316
query72 2631 2148 2110 2110
query73 756 362 361 361
query74 9236 9022 8854 8854
query75 3465 2774 2759 2759
query76 1710 1115 1082 1082
query77 648 439 445 439
query78 9791 9133 9027 9027
query79 1101 568 558 558
query80 858 616 617 616
query81 573 268 262 262
query82 396 155 157 155
query83 235 209 209 209
query84 288 97 97 97
query85 847 353 361 353
query86 344 312 303 303
query87 4369 4359 4213 4213
query88 3595 2543 2559 2543
query89 434 326 328 326
query90 1911 237 232 232
query91 153 125 124 124
query92 84 74 74 74
query93 1109 553 549 549
query94 774 325 332 325
query95 397 297 299 297
query96 601 288 288 288
query97 3214 3087 3131 3087
query98 240 227 240 227
query99 1583 1317 1309 1309
Total cold run time: 308623 ms
Total hot run time: 197703 ms
ClickBench: Total hot run time: 31.64 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit e7f7dac02685af4b7afc837546b0b1d9f4a86798, data reload: false
query1 0.05 0.04 0.04
query2 0.08 0.04 0.05
query3 0.23 0.06 0.06
query4 1.66 0.08 0.08
query5 0.51 0.50 0.48
query6 1.15 0.74 0.73
query7 0.02 0.02 0.01
query8 0.06 0.04 0.06
query9 0.55 0.49 0.49
query10 0.55 0.54 0.54
query11 0.17 0.12 0.12
query12 0.16 0.14 0.14
query13 0.63 0.62 0.60
query14 0.76 0.80 0.78
query15 0.83 0.83 0.85
query16 0.37 0.36 0.37
query17 1.06 0.99 1.01
query18 0.22 0.20 0.20
query19 1.95 1.79 1.74
query20 0.02 0.01 0.01
query21 15.39 0.68 0.68
query22 4.10 7.03 2.17
query23 18.23 1.38 1.33
query24 2.19 0.23 0.23
query25 0.16 0.09 0.08
query26 0.27 0.18 0.18
query27 0.08 0.08 0.08
query28 13.20 1.04 1.01
query29 12.67 3.51 3.43
query30 0.43 0.24 0.24
query31 2.80 0.41 0.40
query32 3.23 0.50 0.49
query33 2.97 3.06 2.98
query34 17.14 4.38 4.38
query35 4.45 4.44 4.51
query36 0.68 0.48 0.50
query37 0.22 0.18 0.18
query38 0.18 0.17 0.17
query39 0.07 0.06 0.06
query40 0.19 0.15 0.15
query41 0.11 0.07 0.07
query42 0.07 0.07 0.07
query43 0.07 0.07 0.06
Total cold run time: 109.93 s
Total hot run time: 31.64 s
run buildall
run buildall
TPC-H: Total hot run time: 37545 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit b67698c36b32d5f69bbd6fa8011b596c044a5486, data reload: false
------ Round 1 ----------------------------------
q1 17646 4302 4278 4278
q2 2013 185 170 170
q3 11677 998 1101 998
q4 10504 707 706 706
q5 7755 2825 2821 2821
q6 225 138 136 136
q7 990 608 587 587
q8 9333 2048 2048 2048
q9 7101 6509 6503 6503
q10 6984 2226 2146 2146
q11 438 244 242 242
q12 387 225 222 222
q13 17770 3029 3010 3010
q14 276 232 239 232
q15 526 492 498 492
q16 490 404 394 394
q17 977 696 630 630
q18 7332 6890 6798 6798
q19 1391 1008 996 996
q20 688 335 318 318
q21 4085 2821 3073 2821
q22 1111 1022 997 997
Total cold run time: 109699 ms
Total hot run time: 37545 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4346 4351 4324 4324
q2 371 280 274 274
q3 2913 2688 2693 2688
q4 1927 1628 1697 1628
q5 5598 5718 5680 5680
q6 233 140 143 140
q7 2291 1859 1818 1818
q8 3333 3400 3431 3400
q9 8911 8897 8951 8897
q10 3588 3415 3481 3415
q11 637 539 539 539
q12 884 706 695 695
q13 15894 3347 3388 3347
q14 352 325 345 325
q15 568 538 544 538
q16 512 470 457 457
q17 1840 1503 1547 1503
q18 8440 7854 7883 7854
q19 1756 1598 1617 1598
q20 2159 1928 1936 1928
q21 5605 5395 5430 5395
q22 1124 1087 1085 1085
Total cold run time: 73282 ms
Total hot run time: 57528 ms
TPC-DS: Total hot run time: 190919 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit b67698c36b32d5f69bbd6fa8011b596c044a5486, data reload: false
query1 1245 907 857 857
query2 6268 1907 1876 1876
query3 10623 3894 3861 3861
query4 59400 25773 23171 23171
query5 5434 488 507 488
query6 416 163 173 163
query7 5761 300 288 288
query8 283 209 205 205
query9 8919 2440 2411 2411
query10 468 273 278 273
query11 17578 14970 15105 14970
query12 156 100 105 100
query13 1549 389 384 384
query14 10927 6966 7261 6966
query15 241 171 168 168
query16 7638 457 461 457
query17 1192 551 563 551
query18 2052 305 294 294
query19 317 152 146 146
query20 116 113 107 107
query21 208 101 104 101
query22 4858 4446 4404 4404
query23 34537 33528 33594 33528
query24 5939 2839 2834 2834
query25 515 378 407 378
query26 687 158 154 154
query27 1778 280 280 280
query28 3723 2024 1997 1997
query29 695 401 404 401
query30 234 152 150 150
query31 909 781 757 757
query32 78 55 56 55
query33 434 289 298 289
query34 859 481 458 458
query35 850 718 711 711
query36 1058 907 924 907
query37 147 81 83 81
query38 3993 3849 3840 3840
query39 1425 1380 1392 1380
query40 204 156 116 116
query41 46 46 43 43
query42 112 93 99 93
query43 508 463 461 461
query44 1044 740 748 740
query45 194 161 167 161
query46 1091 764 742 742
query47 1901 1787 1773 1773
query48 372 299 286 286
query49 756 424 423 423
query50 823 403 404 403
query51 7140 6936 7010 6936
query52 95 84 85 84
query53 252 177 175 175
query54 546 447 453 447
query55 79 74 74 74
query56 278 262 257 257
query57 1186 1054 1054 1054
query58 230 238 252 238
query59 2942 2824 2728 2728
query60 288 267 272 267
query61 103 98 99 98
query62 759 642 653 642
query63 215 183 176 176
query64 3387 1760 1752 1752
query65 3243 3185 3212 3185
query66 676 336 327 327
query67 15487 15260 15175 15175
query68 2914 581 583 581
query69 409 277 271 271
query70 1181 1100 1062 1062
query71 342 276 276 276
query72 2530 2139 2056 2056
query73 701 325 324 324
query74 9270 8747 8782 8747
query75 3349 2690 2692 2690
query76 1348 966 935 935
query77 539 312 314 312
query78 9717 9051 9041 9041
query79 1018 530 532 530
query80 676 499 515 499
query81 459 235 230 230
query82 291 139 139 139
query83 175 154 149 149
query84 260 79 79 79
query85 713 347 342 342
query86 302 303 290 290
query87 4411 4314 4210 4210
query88 2909 2370 2360 2360
query89 370 293 365 293
query90 1841 190 192 190
query91 120 96 100 96
query92 62 51 51 51
query93 1028 535 533 533
query94 626 283 305 283
query95 311 258 256 256
query96 584 270 264 264
query97 3169 3052 3065 3052
query98 212 211 198 198
query99 1499 1283 1285 1283
Total cold run time: 300803 ms
Total hot run time: 190919 ms