doris
doris copied to clipboard
Published
20 hours ago •
apache
apache
[Enhancement](inverted index) support inverted index format v2
Proposed changes
Issue Number: close #xxx
Further comments
If this is a relatively large or complex change, kick off the discussion at [email protected] by explaining why you chose the solution you did and what alternatives you considered, etc...
TPC-H: Total hot run time: 41644 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 27d262f4538c4eb65cd576dab6dcc1df0c699834, data reload: false
------ Round 1 ----------------------------------
q1 17617 4987 4881 4881
q2 2043 139 134 134
q3 10661 1020 1014 1014
q4 4701 984 988 984
q5 7733 3259 3286 3259
q6 194 129 130 129
q7 1290 789 774 774
q8 9352 2110 2095 2095
q9 7661 6741 6699 6699
q10 8324 2648 2635 2635
q11 419 213 224 213
q12 774 332 334 332
q13 18019 3669 3679 3669
q14 315 258 263 258
q15 621 508 505 505
q16 489 415 417 415
q17 966 886 860 860
q18 7597 6828 6664 6664
q19 1584 1519 1510 1510
q20 599 359 324 324
q21 6683 3957 3969 3957
q22 866 352 333 333
Total cold run time: 108508 ms
Total hot run time: 41644 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4823 4811 4814 4811
q2 296 182 183 182
q3 3595 3604 3608 3604
q4 2557 2533 2521 2521
q5 5782 5777 5780 5777
q6 215 124 130 124
q7 2255 1699 1705 1699
q8 3088 3130 3138 3130
q9 8775 8766 8759 8759
q10 6773 4250 4230 4230
q11 511 367 374 367
q12 771 535 540 535
q13 5710 3394 3390 3390
q14 277 230 236 230
q15 601 507 505 505
q16 501 439 466 439
q17 1675 1634 1620 1620
q18 8292 7801 7656 7656
q19 1654 1673 1660 1660
q20 2106 1843 1817 1817
q21 6603 6200 6136 6136
q22 575 492 499 492
Total cold run time: 67435 ms
Total hot run time: 59684 ms
TPC-DS: Total hot run time: 180747 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 27d262f4538c4eb65cd576dab6dcc1df0c699834, data reload: false
query1 921 354 348 348
query2 6507 1764 1774 1764
query3 6719 218 216 216
query4 24485 22521 22535 22521
query5 4260 471 464 464
query6 267 162 164 162
query7 4615 302 302 302
query8 250 196 201 196
query9 8443 2795 2767 2767
query10 429 253 245 245
query11 16102 15629 15668 15629
query12 144 84 84 84
query13 1709 415 422 415
query14 9386 7561 7707 7561
query15 222 183 188 183
query16 7499 257 254 254
query17 1410 562 527 527
query18 1963 265 264 264
query19 195 146 147 146
query20 88 82 86 82
query21 183 124 122 122
query22 5027 4819 4790 4790
query23 32598 31490 31647 31490
query24 12507 3429 3325 3325
query25 613 365 360 360
query26 1708 154 168 154
query27 3033 308 321 308
query28 6589 1822 1808 1808
query29 1129 623 608 608
query30 271 140 147 140
query31 966 760 768 760
query32 95 58 55 55
query33 720 235 240 235
query34 1053 486 500 486
query35 945 824 819 819
query36 979 955 912 912
query37 136 59 62 59
query38 3404 3287 3353 3287
query39 1368 1334 1294 1294
query40 283 109 103 103
query41 37 34 34 34
query42 108 99 101 99
query43 485 454 445 445
query44 1053 685 707 685
query45 203 181 179 179
query46 1039 780 772 772
query47 1668 1611 1614 1611
query48 406 357 349 349
query49 1167 305 301 301
query50 790 400 380 380
query51 5269 5199 5216 5199
query52 107 90 89 89
query53 393 308 298 298
query54 297 236 220 220
query55 87 86 81 81
query56 219 203 205 203
query57 1042 971 950 950
query58 207 198 201 198
query59 2299 2143 2139 2139
query60 249 225 219 219
query61 86 84 87 84
query62 585 384 373 373
query63 329 285 283 283
query64 6404 3055 3093 3055
query65 3285 3273 3255 3255
query66 1348 332 322 322
query67 14566 14209 14249 14209
query68 5100 589 582 582
query69 523 358 366 358
query70 1240 1204 1248 1204
query71 390 255 252 252
query72 6338 2787 2609 2609
query73 716 320 313 313
query74 7099 6606 6610 6606
query75 3181 2566 2570 2566
query76 3278 1088 1217 1088
query77 349 242 232 232
query78 9463 8815 8780 8780
query79 978 506 509 506
query80 521 351 350 350
query81 438 203 204 203
query82 240 83 85 83
query83 143 122 121 121
query84 231 77 76 76
query85 1029 342 336 336
query86 297 317 310 310
query87 3555 3402 3400 3400
query88 2705 2299 2298 2298
query89 428 353 352 352
query90 1887 164 166 164
query91 151 131 128 128
query92 56 53 50 50
query93 1014 488 528 488
query94 1170 182 181 181
query95 493 8743 373 373
query96 584 263 263 263
query97 4442 4307 4295 4295
query98 228 208 193 193
query99 1074 744 710 710
Total cold run time: 272290 ms
Total hot run time: 180747 ms
ClickBench: Total hot run time: 31.27 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 27d262f4538c4eb65cd576dab6dcc1df0c699834, data reload: false
query1 0.03 0.02 0.03
query2 0.06 0.02 0.02
query3 0.22 0.07 0.08
query4 1.65 0.08 0.09
query5 0.49 0.48 0.48
query6 1.37 0.63 0.62
query7 0.02 0.02 0.01
query8 0.04 0.02 0.02
query9 0.53 0.44 0.44
query10 0.48 0.49 0.49
query11 0.13 0.09 0.10
query12 0.11 0.10 0.10
query13 0.59 0.59 0.59
query14 0.76 0.78 0.78
query15 0.81 0.80 0.79
query16 0.34 0.33 0.33
query17 0.83 0.88 0.94
query18 0.18 0.17 0.16
query19 1.76 1.64 1.62
query20 0.01 0.00 0.01
query21 15.45 0.67 0.57
query22 3.05 3.48 2.97
query23 17.40 1.07 1.07
query24 1.95 1.19 0.12
query25 0.48 0.08 0.05
query26 0.15 0.14 0.13
query27 0.05 0.05 0.05
query28 11.87 0.84 0.84
query29 12.57 3.24 3.33
query30 0.53 0.48 0.48
query31 2.78 0.36 0.37
query32 3.33 0.47 0.48
query33 3.17 3.12 3.14
query34 15.36 4.49 4.50
query35 4.49 4.50 4.48
query36 1.06 0.94 0.94
query37 0.06 0.05 0.05
query38 0.03 0.03 0.03
query39 0.02 0.02 0.02
query40 0.17 0.16 0.15
query41 0.07 0.02 0.02
query42 0.02 0.02 0.02
query43 0.02 0.01 0.02
Total cold run time: 104.49 s
Total hot run time: 31.27 s
Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
Load test result on commit 27d262f4538c4eb65cd576dab6dcc1df0c699834 with default session variables
Stream load json: 19 seconds loaded 2358488459 Bytes, about 118 MB/s
Stream load orc: 61 seconds loaded 1101869774 Bytes, about 17 MB/s
Stream load parquet: 32 seconds loaded 861443392 Bytes, about 25 MB/s
Insert into select: 13.8 seconds inserted 10000000 Rows, about 724K ops/s
TeamCity be ut coverage result: Function Coverage: 36.14% (8638/23899) Line Coverage: 28.17% (70638/250765) Region Coverage: 27.18% (36458/134157) Branch Coverage: 23.96% (18675/77934) Coverage Report: http://coverage.selectdb-in.cc/coverage/27d262f4538c4eb65cd576dab6dcc1df0c699834_27d262f4538c4eb65cd576dab6dcc1df0c699834/report/index.html
TeamCity be ut coverage result: Function Coverage: 35.73% (8560/23959) Line Coverage: 27.66% (69438/251054) Region Coverage: 26.79% (36032/134494) Branch Coverage: 23.60% (18429/78082) Coverage Report: http://coverage.selectdb-in.cc/coverage/ce70a9ba2ff48d16b884d83bd452224c04d6da5a_ce70a9ba2ff48d16b884d83bd452224c04d6da5a/report/index.html
TPC-H: Total hot run time: 41409 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit ce70a9ba2ff48d16b884d83bd452224c04d6da5a, data reload: false
------ Round 1 ----------------------------------
q1 17666 4946 4853 4853
q2 2045 140 134 134
q3 10576 1022 1004 1004
q4 4659 984 1013 984
q5 7695 3220 3257 3220
q6 195 132 133 132
q7 1257 767 767 767
q8 9245 2099 2088 2088
q9 7602 6697 6704 6697
q10 8329 2646 2633 2633
q11 421 224 218 218
q12 767 322 324 322
q13 18001 3663 3644 3644
q14 296 254 258 254
q15 603 514 528 514
q16 476 410 435 410
q17 936 854 837 837
q18 7471 6639 6597 6597
q19 1568 1497 1508 1497
q20 598 355 323 323
q21 6577 3953 3970 3953
q22 879 328 338 328
Total cold run time: 107862 ms
Total hot run time: 41409 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4778 4800 4800 4800
q2 290 178 179 178
q3 3595 3583 3573 3573
q4 2501 2519 2505 2505
q5 5759 5767 5730 5730
q6 211 125 127 125
q7 2217 1638 1652 1638
q8 3002 3077 3078 3077
q9 8675 8701 8667 8667
q10 6764 4228 4235 4228
q11 509 364 363 363
q12 755 526 536 526
q13 4435 3388 3402 3388
q14 259 236 251 236
q15 631 499 506 499
q16 468 428 443 428
q17 1650 1595 1587 1587
q18 8379 7668 7494 7494
q19 1647 1644 1645 1644
q20 2108 1844 1831 1831
q21 6529 6140 6147 6140
q22 597 505 509 505
Total cold run time: 65759 ms
Total hot run time: 59162 ms
TPC-DS: Total hot run time: 176671 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit ce70a9ba2ff48d16b884d83bd452224c04d6da5a, data reload: false
query1 918 346 346 346
query2 6535 1810 1718 1718
query3 6687 202 203 202
query4 23347 21078 21105 21078
query5 4254 451 456 451
query6 248 169 160 160
query7 4600 291 283 283
query8 243 203 202 202
query9 8423 2754 2732 2732
query10 415 226 223 223
query11 15040 14418 14464 14418
query12 134 81 84 81
query13 1692 420 413 413
query14 9069 7509 7611 7509
query15 209 182 180 180
query16 7436 247 245 245
query17 1433 555 537 537
query18 1955 262 255 255
query19 187 149 142 142
query20 87 81 88 81
query21 187 129 109 109
query22 5100 4587 4751 4587
query23 32481 31510 31443 31443
query24 12650 3418 3372 3372
query25 643 355 356 355
query26 1869 151 165 151
query27 3032 309 309 309
query28 6641 1830 1822 1822
query29 1142 608 607 607
query30 282 136 145 136
query31 932 740 739 739
query32 95 57 54 54
query33 717 241 236 236
query34 1063 479 491 479
query35 943 824 813 813
query36 999 918 920 918
query37 155 62 62 62
query38 3250 3152 3180 3152
query39 1363 1342 1304 1304
query40 281 102 102 102
query41 36 35 40 35
query42 100 101 99 99
query43 477 443 442 442
query44 1088 675 694 675
query45 190 181 177 177
query46 1042 759 749 749
query47 1640 1592 1594 1592
query48 420 342 341 341
query49 1220 294 300 294
query50 762 387 369 369
query51 5300 5144 5141 5141
query52 107 96 88 88
query53 382 290 294 290
query54 288 220 221 220
query55 85 84 77 77
query56 212 203 199 199
query57 1043 922 948 922
query58 214 192 186 186
query59 2241 2224 2187 2187
query60 231 209 227 209
query61 81 81 80 80
query62 597 411 378 378
query63 317 279 276 276
query64 6367 2999 3111 2999
query65 3274 3223 3247 3223
query66 1334 325 317 317
query67 15029 14050 14094 14050
query68 5139 543 548 543
query69 521 348 352 348
query70 1255 1272 1291 1272
query71 433 252 251 251
query72 6288 2798 2614 2614
query73 695 306 314 306
query74 6885 6469 6505 6469
query75 3193 2568 2552 2552
query76 3227 1113 1184 1113
query77 353 247 227 227
query78 9399 8876 8742 8742
query79 983 502 498 498
query80 512 352 334 334
query81 435 208 200 200
query82 233 85 81 81
query83 142 121 118 118
query84 228 80 77 77
query85 1021 355 328 328
query86 285 306 319 306
query87 3487 3341 3286 3286
query88 2681 2275 2278 2275
query89 436 350 350 350
query90 1967 161 160 160
query91 155 124 133 124
query92 53 49 52 49
query93 970 519 471 471
query94 1140 177 176 176
query95 466 369 361 361
query96 576 260 261 260
query97 4455 4264 4245 4245
query98 217 202 192 192
query99 1083 768 722 722
Total cold run time: 269727 ms
Total hot run time: 176671 ms
ClickBench: Total hot run time: 30.94 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit ce70a9ba2ff48d16b884d83bd452224c04d6da5a, data reload: false
query1 0.04 0.03 0.02
query2 0.06 0.02 0.02
query3 0.22 0.07 0.06
query4 1.65 0.08 0.07
query5 0.49 0.48 0.48
query6 1.38 0.62 0.62
query7 0.02 0.01 0.01
query8 0.03 0.02 0.02
query9 0.52 0.45 0.46
query10 0.50 0.48 0.49
query11 0.12 0.09 0.10
query12 0.13 0.10 0.11
query13 0.59 0.58 0.59
query14 0.76 0.79 0.80
query15 0.82 0.79 0.78
query16 0.32 0.35 0.33
query17 0.89 0.91 0.89
query18 0.17 0.16 0.15
query19 1.81 1.71 1.69
query20 0.01 0.01 0.01
query21 15.42 0.63 0.62
query22 3.21 3.82 2.52
query23 17.64 1.03 1.01
query24 2.05 0.92 0.12
query25 0.54 0.05 0.07
query26 0.16 0.14 0.13
query27 0.06 0.05 0.05
query28 12.01 0.83 0.82
query29 12.60 3.37 3.56
query30 0.55 0.49 0.48
query31 2.78 0.35 0.38
query32 3.34 0.47 0.48
query33 3.11 3.17 3.14
query34 15.36 4.49 4.49
query35 4.50 4.49 4.49
query36 1.08 0.94 0.94
query37 0.07 0.06 0.05
query38 0.04 0.02 0.02
query39 0.02 0.02 0.01
query40 0.17 0.14 0.15
query41 0.06 0.01 0.02
query42 0.03 0.01 0.02
query43 0.02 0.02 0.01
Total cold run time: 105.35 s
Total hot run time: 30.94 s
Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
Load test result on commit ce70a9ba2ff48d16b884d83bd452224c04d6da5a with default session variables
Stream load json: 19 seconds loaded 2358488459 Bytes, about 118 MB/s
Stream load orc: 59 seconds loaded 1101869774 Bytes, about 17 MB/s
Stream load parquet: 31 seconds loaded 861443392 Bytes, about 26 MB/s
Insert into select: 14.1 seconds inserted 10000000 Rows, about 709K ops/s
TPC-H: Total hot run time: 41486 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 14325fbce2b44f2464b2eb7b3f58702b751829b3, data reload: false
------ Round 1 ----------------------------------
q1 17668 4992 4857 4857
q2 2040 141 137 137
q3 10576 1042 997 997
q4 4657 961 965 961
q5 7687 3246 3303 3246
q6 191 129 126 126
q7 1251 787 772 772
q8 9234 2091 2091 2091
q9 7599 6730 6692 6692
q10 8288 2638 2643 2638
q11 421 218 201 201
q12 713 326 326 326
q13 17990 3712 3689 3689
q14 290 260 254 254
q15 598 534 528 528
q16 479 409 410 409
q17 929 898 892 892
q18 7581 6629 6741 6629
q19 1553 1484 1492 1484
q20 606 337 326 326
q21 6347 3904 3978 3904
q22 869 351 327 327
Total cold run time: 107567 ms
Total hot run time: 41486 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4840 4849 4841 4841
q2 289 181 183 181
q3 3603 3588 3559 3559
q4 2505 2520 2517 2517
q5 5743 5753 5782 5753
q6 208 124 126 124
q7 2260 1635 1649 1635
q8 3008 3115 3106 3106
q9 8733 8721 8684 8684
q10 6778 4245 4231 4231
q11 522 376 356 356
q12 772 543 538 538
q13 4695 3425 3392 3392
q14 255 233 246 233
q15 596 496 497 496
q16 536 417 432 417
q17 1666 1620 1615 1615
q18 8310 7743 7728 7728
q19 1644 1647 1640 1640
q20 2093 1831 1837 1831
q21 6552 6161 6131 6131
q22 566 498 500 498
Total cold run time: 66174 ms
Total hot run time: 59506 ms
TPC-DS: Total hot run time: 185687 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 14325fbce2b44f2464b2eb7b3f58702b751829b3, data reload: false
query1 925 345 343 343
query2 6536 1853 1788 1788
query3 6691 199 204 199
query4 23249 21148 21090 21090
query5 4182 456 452 452
query6 251 170 169 169
query7 4614 305 291 291
query8 246 192 188 188
query9 8412 2805 2804 2804
query10 425 225 231 225
query11 15027 14453 14598 14453
query12 143 85 80 80
query13 1696 415 419 415
query14 9387 7501 7552 7501
query15 216 187 190 187
query16 7528 260 244 244
query17 1476 555 543 543
query18 1957 271 265 265
query19 190 148 150 148
query20 84 80 84 80
query21 187 117 113 113
query22 5029 4785 4934 4785
query23 32519 31622 31607 31607
query24 12655 3443 3365 3365
query25 642 357 360 357
query26 1873 149 158 149
query27 3049 312 311 311
query28 6594 1841 1821 1821
query29 1119 620 614 614
query30 282 135 148 135
query31 956 759 754 754
query32 91 59 53 53
query33 713 237 226 226
query34 1075 484 499 484
query35 922 840 820 820
query36 979 897 872 872
query37 141 61 59 59
query38 3325 3177 3199 3177
query39 1390 1319 1303 1303
query40 279 106 105 105
query41 38 34 34 34
query42 106 99 95 95
query43 478 449 445 445
query44 1052 694 702 694
query45 198 180 176 176
query46 1042 762 761 761
query47 1691 1567 1555 1555
query48 408 353 345 345
query49 1233 302 300 300
query50 781 384 370 370
query51 5335 5196 5216 5196
query52 110 88 94 88
query53 399 289 291 289
query54 297 222 226 222
query55 82 82 81 81
query56 215 203 193 193
query57 1001 901 926 901
query58 220 201 200 200
query59 2358 2329 2130 2130
query60 249 219 211 211
query61 82 83 83 83
query62 598 376 356 356
query63 327 282 286 282
query64 6293 3069 3122 3069
query65 3290 3278 3239 3239
query66 1333 329 318 318
query67 14936 14546 14350 14350
query68 5164 557 574 557
query69 500 356 358 356
query70 1312 1221 1262 1221
query71 443 249 252 249
query72 6292 2786 2627 2627
query73 690 307 308 307
query74 6857 6422 6441 6422
query75 3239 2560 2538 2538
query76 3340 1117 1209 1117
query77 361 236 232 232
query78 9469 8781 8871 8781
query79 963 502 504 502
query80 513 356 345 345
query81 440 208 208 208
query82 163 85 84 84
query83 145 124 120 120
query84 221 79 76 76
query85 1005 340 339 339
query86 298 312 310 310
query87 3423 3288 3290 3288
query88 2715 2294 2287 2287
query89 446 367 352 352
query90 1971 158 163 158
query91 156 122 128 122
query92 52 49 50 49
query93 997 520 499 499
query94 1258 174 180 174
query95 473 8807 8383 8383
query96 582 273 269 269
query97 4476 4263 4290 4263
query98 214 194 202 194
query99 1087 700 736 700
Total cold run time: 270472 ms
Total hot run time: 185687 ms
ClickBench: Total hot run time: 30.31 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 14325fbce2b44f2464b2eb7b3f58702b751829b3, data reload: false
query1 0.02 0.02 0.02
query2 0.06 0.02 0.02
query3 0.22 0.07 0.07
query4 1.67 0.09 0.09
query5 0.49 0.48 0.47
query6 1.37 0.63 0.62
query7 0.02 0.02 0.01
query8 0.04 0.03 0.03
query9 0.51 0.45 0.45
query10 0.47 0.48 0.49
query11 0.14 0.09 0.09
query12 0.12 0.10 0.10
query13 0.58 0.58 0.59
query14 0.76 0.78 0.79
query15 0.81 0.80 0.79
query16 0.36 0.32 0.33
query17 0.92 0.91 0.86
query18 0.18 0.16 0.16
query19 1.73 1.70 1.68
query20 0.01 0.01 0.01
query21 15.40 0.62 0.56
query22 2.82 5.16 1.85
query23 17.78 1.05 1.02
query24 2.13 0.58 0.31
query25 0.62 0.07 0.05
query26 0.17 0.14 0.14
query27 0.05 0.05 0.05
query28 12.00 0.83 0.83
query29 12.51 3.24 3.29
query30 0.50 0.49 0.48
query31 2.78 0.36 0.38
query32 3.33 0.47 0.47
query33 3.10 3.14 3.10
query34 15.35 4.50 4.50
query35 4.52 4.48 4.51
query36 1.06 0.95 0.95
query37 0.07 0.05 0.06
query38 0.04 0.04 0.03
query39 0.02 0.02 0.02
query40 0.18 0.15 0.14
query41 0.07 0.02 0.02
query42 0.02 0.01 0.01
query43 0.02 0.03 0.02
Total cold run time: 105.02 s
Total hot run time: 30.31 s
Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
Load test result on commit 14325fbce2b44f2464b2eb7b3f58702b751829b3 with default session variables
Stream load json: 19 seconds loaded 2358488459 Bytes, about 118 MB/s
Stream load orc: 59 seconds loaded 1101869774 Bytes, about 17 MB/s
Stream load parquet: 32 seconds loaded 861443392 Bytes, about 25 MB/s
Insert into select: 13.3 seconds inserted 10000000 Rows, about 751K ops/s
TPC-H: Total hot run time: 41881 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 22da4bb93478e910a6ada61d1a16a62bff07f5f7, data reload: false
------ Round 1 ----------------------------------
q1 18610 5010 4873 4873
q2 2040 141 133 133
q3 11874 1086 1036 1036
q4 4654 982 988 982
q5 7704 3257 3288 3257
q6 199 133 132 132
q7 1258 785 776 776
q8 9931 2085 2079 2079
q9 7602 6718 6722 6718
q10 8517 2821 2785 2785
q11 425 228 211 211
q12 768 348 343 343
q13 18768 3796 3740 3740
q14 298 289 268 268
q15 600 525 519 519
q16 525 432 430 430
q17 1097 910 876 876
q18 7606 6658 6730 6658
q19 1542 1477 1491 1477
q20 611 354 343 343
q21 6227 3908 3966 3908
q22 867 346 337 337
Total cold run time: 111723 ms
Total hot run time: 41881 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4844 4818 4802 4802
q2 314 200 195 195
q3 3616 3608 3606 3606
q4 2513 2523 2498 2498
q5 5750 5754 5763 5754
q6 213 124 122 122
q7 2259 1713 1686 1686
q8 3517 3073 3085 3073
q9 8692 8704 8676 8676
q10 6786 4233 4237 4233
q11 544 414 404 404
q12 788 540 548 540
q13 4452 3441 3447 3441
q14 266 237 230 230
q15 630 502 496 496
q16 474 446 431 431
q17 1705 1633 1631 1631
q18 8353 7721 7624 7624
q19 1635 1626 1628 1626
q20 2140 1827 1855 1827
q21 6700 6301 6320 6301
q22 584 505 527 505
Total cold run time: 66775 ms
Total hot run time: 59701 ms
TeamCity be ut coverage result: Function Coverage: 35.73% (8560/23959) Line Coverage: 27.66% (69452/251073) Region Coverage: 26.80% (36047/134508) Branch Coverage: 23.61% (18439/78094) Coverage Report: http://coverage.selectdb-in.cc/coverage/22da4bb93478e910a6ada61d1a16a62bff07f5f7_22da4bb93478e910a6ada61d1a16a62bff07f5f7/report/index.html
TPC-DS: Total hot run time: 176526 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 22da4bb93478e910a6ada61d1a16a62bff07f5f7, data reload: false
query1 916 348 346 346
query2 6513 1691 1696 1691
query3 6703 207 201 201
query4 23107 21271 21011 21011
query5 4277 464 379 379
query6 266 178 177 177
query7 4601 300 282 282
query8 248 192 193 192
query9 8436 2761 2766 2761
query10 406 231 212 212
query11 15101 14551 14415 14415
query12 141 85 79 79
query13 1682 420 408 408
query14 9523 7518 7358 7358
query15 212 187 201 187
query16 7551 262 254 254
query17 1405 541 518 518
query18 1947 264 255 255
query19 195 144 146 144
query20 87 81 93 81
query21 192 123 122 122
query22 4957 4702 4749 4702
query23 32472 31574 31418 31418
query24 12819 3431 3351 3351
query25 635 358 356 356
query26 1895 148 159 148
query27 3060 311 314 311
query28 6656 1841 1835 1835
query29 1162 604 599 599
query30 283 134 146 134
query31 930 744 747 744
query32 94 57 60 57
query33 718 246 218 218
query34 1072 502 500 500
query35 955 825 820 820
query36 1009 909 912 909
query37 186 57 61 57
query38 3280 3155 3190 3155
query39 1378 1303 1309 1303
query40 292 105 107 105
query41 37 34 32 32
query42 103 103 100 100
query43 466 424 438 424
query44 1067 695 709 695
query45 197 179 174 174
query46 1051 788 764 764
query47 1634 1563 1532 1532
query48 425 345 342 342
query49 1225 302 297 297
query50 779 374 360 360
query51 5301 5206 5230 5206
query52 102 96 88 88
query53 395 294 294 294
query54 289 219 219 219
query55 87 81 79 79
query56 219 199 195 195
query57 1016 902 919 902
query58 211 193 195 193
query59 2219 2188 2105 2105
query60 232 221 223 221
query61 83 86 80 80
query62 601 385 372 372
query63 319 278 280 278
query64 6311 3060 3113 3060
query65 3252 3249 3232 3232
query66 1325 324 321 321
query67 14865 14009 14021 14009
query68 5057 543 551 543
query69 504 360 356 356
query70 1286 1190 1229 1190
query71 380 253 250 250
query72 6327 2750 2611 2611
query73 707 316 313 313
query74 6902 6432 6437 6432
query75 3188 2528 2529 2528
query76 3161 1127 1212 1127
query77 363 242 233 233
query78 9488 8908 8938 8908
query79 993 512 511 511
query80 523 346 348 346
query81 447 204 204 204
query82 159 84 87 84
query83 145 116 118 116
query84 224 77 77 77
query85 995 337 334 334
query86 300 303 308 303
query87 3413 3344 3304 3304
query88 2708 2281 2284 2281
query89 455 347 345 345
query90 1842 162 163 162
query91 154 125 127 125
query92 56 51 50 50
query93 1000 519 476 476
query94 1155 179 179 179
query95 8666 367 8420 367
query96 584 264 266 264
query97 4437 4264 4288 4264
query98 216 205 192 192
query99 1060 730 682 682
Total cold run time: 278068 ms
Total hot run time: 176526 ms
ClickBench: Total hot run time: 31.5 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 22da4bb93478e910a6ada61d1a16a62bff07f5f7, data reload: false
query1 0.03 0.02 0.02
query2 0.07 0.02 0.03
query3 0.22 0.08 0.08
query4 1.62 0.07 0.08
query5 0.48 0.48 0.48
query6 1.33 0.60 0.60
query7 0.02 0.01 0.01
query8 0.04 0.03 0.03
query9 0.54 0.46 0.45
query10 0.49 0.48 0.49
query11 0.12 0.09 0.09
query12 0.12 0.10 0.10
query13 0.60 0.58 0.58
query14 0.76 0.81 0.78
query15 0.82 0.80 0.78
query16 0.32 0.33 0.34
query17 0.88 0.92 0.94
query18 0.19 0.17 0.14
query19 1.82 1.73 1.67
query20 0.01 0.02 0.02
query21 15.40 0.60 0.59
query22 3.38 4.39 2.85
query23 17.22 1.13 0.97
query24 2.19 0.56 0.40
query25 0.53 0.07 0.05
query26 0.17 0.14 0.14
query27 0.06 0.05 0.05
query28 11.78 0.84 0.84
query29 12.50 3.30 3.35
query30 0.53 0.48 0.48
query31 2.83 0.36 0.36
query32 3.31 0.48 0.48
query33 3.09 3.14 3.14
query34 15.35 4.53 4.50
query35 4.49 4.47 4.49
query36 1.06 0.95 0.95
query37 0.07 0.05 0.05
query38 0.04 0.03 0.03
query39 0.02 0.01 0.01
query40 0.17 0.14 0.15
query41 0.07 0.02 0.02
query42 0.02 0.01 0.02
query43 0.02 0.02 0.02
Total cold run time: 104.78 s
Total hot run time: 31.5 s
Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
Load test result on commit 22da4bb93478e910a6ada61d1a16a62bff07f5f7 with default session variables
Stream load json: 19 seconds loaded 2358488459 Bytes, about 118 MB/s
Stream load orc: 60 seconds loaded 1101869774 Bytes, about 17 MB/s
Stream load parquet: 32 seconds loaded 861443392 Bytes, about 25 MB/s
Insert into select: 13.7 seconds inserted 10000000 Rows, about 729K ops/s