doris
doris copied to clipboard
Published
20 hours ago •
apache
apache
[minor](dependencies)binding a third-party Hadoop component to version 1.2.0
Proposed changes
binding a third-party Hadoop component to version 1.2.0
hadoop-shaded-protobuf and hadoop-shaded-guava are older components, and the components such as guava they depend on have some known CVE issues, so they were upgraded to 1.2.0
remove unless hadoop yarn and htrace jars
Thank you for your contribution to Apache Doris. Don't know what should be done next? See How to process your PR
Since 2024-03-18, the Document has been moved to doris-website. See Doris Document.
TPC-H: Total hot run time: 39932 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 2c53fcdebce33619e0893aeb8ecccaf5567b5596, data reload: false
------ Round 1 ----------------------------------
q1 18010 4469 4366 4366
q2 2462 189 201 189
q3 11623 1207 1244 1207
q4 10695 777 820 777
q5 7589 2717 2704 2704
q6 228 134 137 134
q7 967 614 599 599
q8 9270 2042 2046 2042
q9 8884 6507 6489 6489
q10 8841 3651 3702 3651
q11 448 242 226 226
q12 472 222 218 218
q13 17757 2966 2964 2964
q14 253 225 219 219
q15 511 476 475 475
q16 532 376 370 370
q17 954 650 595 595
q18 8074 7418 7408 7408
q19 5004 1565 1481 1481
q20 647 309 315 309
q21 4865 3888 3236 3236
q22 339 273 283 273
Total cold run time: 118425 ms
Total hot run time: 39932 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4383 4316 4230 4230
q2 377 269 272 269
q3 2956 2799 2677 2677
q4 1833 1616 1558 1558
q5 5251 5234 5232 5232
q6 221 127 128 127
q7 2107 1763 1721 1721
q8 3161 3606 3303 3303
q9 8359 8359 8282 8282
q10 3890 3660 3726 3660
q11 595 496 487 487
q12 751 592 614 592
q13 16398 2956 2987 2956
q14 290 256 269 256
q15 519 469 474 469
q16 471 412 416 412
q17 1770 1491 1472 1472
q18 7710 7380 7372 7372
q19 1650 1533 1483 1483
q20 1981 1774 1770 1770
q21 4821 4787 4776 4776
q22 589 495 492 492
Total cold run time: 70083 ms
Total hot run time: 53596 ms
TPC-DS: Total hot run time: 171831 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 2c53fcdebce33619e0893aeb8ecccaf5567b5596, data reload: false
query1 928 380 376 376
query2 6458 2263 2310 2263
query3 6653 204 207 204
query4 19162 17534 17377 17377
query5 4165 421 438 421
query6 255 153 159 153
query7 4589 298 282 282
query8 233 186 182 182
query9 8603 2367 2327 2327
query10 442 274 255 255
query11 10734 10198 10212 10198
query12 132 93 89 89
query13 1636 351 362 351
query14 10129 6809 6625 6625
query15 216 169 173 169
query16 7826 269 251 251
query17 1616 534 529 529
query18 1955 274 264 264
query19 216 151 152 151
query20 90 85 83 83
query21 209 129 127 127
query22 4260 4108 4008 4008
query23 33508 32979 32904 32904
query24 12078 2875 2874 2874
query25 635 345 361 345
query26 1628 149 152 149
query27 2999 318 321 318
query28 7553 2042 2043 2042
query29 1037 601 601 601
query30 307 172 175 172
query31 980 762 753 753
query32 97 51 53 51
query33 756 264 253 253
query34 1020 496 472 472
query35 728 598 581 581
query36 1070 907 878 878
query37 141 70 71 70
query38 2879 2794 2776 2776
query39 861 789 797 789
query40 270 121 121 121
query41 49 45 44 44
query42 100 98 93 93
query43 579 559 559 559
query44 1240 724 736 724
query45 178 162 162 162
query46 1073 718 725 718
query47 1848 1770 1840 1770
query48 360 287 280 280
query49 1152 375 381 375
query50 764 369 370 369
query51 6849 6817 6716 6716
query52 100 90 89 89
query53 346 284 291 284
query54 876 423 454 423
query55 72 70 69 69
query56 255 239 239 239
query57 1113 1053 1068 1053
query58 249 203 208 203
query59 3352 3169 3128 3128
query60 264 251 247 247
query61 90 85 83 83
query62 666 453 436 436
query63 312 288 283 283
query64 9813 2281 1727 1727
query65 3174 3092 3089 3089
query66 1379 328 321 321
query67 15210 15225 15000 15000
query68 4543 523 528 523
query69 430 261 265 261
query70 1171 1142 1114 1114
query71 402 269 266 266
query72 7348 5439 5453 5439
query73 721 317 313 313
query74 6211 5618 5621 5618
query75 3324 2599 2588 2588
query76 2423 1029 930 930
query77 417 260 260 260
query78 10310 9671 9740 9671
query79 2055 516 505 505
query80 878 427 428 427
query81 519 240 242 240
query82 649 94 92 92
query83 242 168 164 164
query84 233 85 84 84
query85 1871 256 257 256
query86 528 313 306 306
query87 3322 3146 3150 3146
query88 4073 2308 2289 2289
query89 483 398 370 370
query90 1959 186 185 185
query91 131 109 103 103
query92 60 49 52 49
query93 2357 509 501 501
query94 1255 194 253 194
query95 396 303 300 300
query96 595 259 264 259
query97 3160 2982 3042 2982
query98 244 215 216 215
query99 1101 863 864 863
Total cold run time: 273928 ms
Total hot run time: 171831 ms
ClickBench: Total hot run time: 30.48 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 2c53fcdebce33619e0893aeb8ecccaf5567b5596, data reload: false
query1 0.04 0.03 0.04
query2 0.08 0.04 0.04
query3 0.23 0.07 0.06
query4 1.66 0.09 0.10
query5 0.51 0.49 0.52
query6 1.12 0.72 0.72
query7 0.02 0.02 0.02
query8 0.05 0.04 0.05
query9 0.53 0.49 0.49
query10 0.55 0.53 0.55
query11 0.16 0.11 0.11
query12 0.15 0.12 0.12
query13 0.59 0.59 0.61
query14 0.78 0.77 0.79
query15 0.82 0.80 0.82
query16 0.36 0.37 0.36
query17 0.94 1.01 0.96
query18 0.23 0.26 0.24
query19 1.76 1.71 1.77
query20 0.01 0.01 0.02
query21 15.44 0.70 0.67
query22 4.88 6.84 1.95
query23 18.31 1.40 1.22
query24 1.96 0.23 0.21
query25 0.15 0.09 0.08
query26 0.26 0.17 0.18
query27 0.08 0.07 0.08
query28 13.25 1.02 1.00
query29 12.61 3.27 3.30
query30 0.24 0.07 0.05
query31 2.87 0.39 0.38
query32 3.28 0.47 0.47
query33 2.84 2.86 2.93
query34 17.04 4.52 4.43
query35 4.49 4.45 4.46
query36 0.64 0.46 0.45
query37 0.17 0.15 0.16
query38 0.14 0.14 0.15
query39 0.05 0.03 0.04
query40 0.17 0.14 0.14
query41 0.09 0.04 0.04
query42 0.04 0.05 0.04
query43 0.04 0.03 0.04
Total cold run time: 109.63 s
Total hot run time: 30.48 s
TPC-H: Total hot run time: 40872 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit b73f2549e45cb9928b4a39b084f4939152564e79, data reload: false
------ Round 1 ----------------------------------
q1 17595 4258 4210 4210
q2 2013 188 188 188
q3 10455 1204 1235 1204
q4 10193 883 790 790
q5 7476 2714 2660 2660
q6 226 129 131 129
q7 947 612 613 612
q8 9236 2100 2070 2070
q9 8999 6661 6657 6657
q10 9207 3955 3903 3903
q11 448 252 239 239
q12 418 224 225 224
q13 17401 3227 3239 3227
q14 253 212 215 212
q15 496 466 484 466
q16 472 384 395 384
q17 953 655 766 655
q18 8438 7818 7689 7689
q19 5431 1556 1541 1541
q20 621 317 319 317
q21 5116 3219 3268 3219
q22 341 276 279 276
Total cold run time: 116735 ms
Total hot run time: 40872 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4445 4369 4351 4351
q2 387 279 277 277
q3 3137 2983 2874 2874
q4 1972 1653 1611 1611
q5 5333 5490 5470 5470
q6 221 124 124 124
q7 2179 1806 1814 1806
q8 3208 3404 3368 3368
q9 8516 8537 8675 8537
q10 4017 3771 3684 3684
q11 608 487 508 487
q12 789 630 625 625
q13 17078 3128 3172 3128
q14 292 268 289 268
q15 526 479 470 470
q16 511 447 425 425
q17 1779 1529 1504 1504
q18 7783 7602 7463 7463
q19 1647 1563 1562 1562
q20 2013 1754 1789 1754
q21 10699 4683 4718 4683
q22 547 481 473 473
Total cold run time: 77687 ms
Total hot run time: 54944 ms
TPC-DS: Total hot run time: 168090 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit b73f2549e45cb9928b4a39b084f4939152564e79, data reload: false
query1 910 373 372 372
query2 6446 2415 2331 2331
query3 6642 207 215 207
query4 20082 17246 17335 17246
query5 4121 410 416 410
query6 246 155 150 150
query7 4581 296 284 284
query8 250 179 182 179
query9 8658 2383 2358 2358
query10 446 285 265 265
query11 10704 10056 10004 10004
query12 135 97 90 90
query13 1644 387 351 351
query14 9439 6509 7509 6509
query15 210 166 175 166
query16 7747 257 268 257
query17 1624 521 516 516
query18 1938 265 269 265
query19 208 154 161 154
query20 91 88 81 81
query21 195 133 122 122
query22 4422 3964 3903 3903
query23 33638 33075 32653 32653
query24 6887 2896 2798 2798
query25 569 351 349 349
query26 710 160 155 155
query27 2031 318 331 318
query28 3933 2035 2029 2029
query29 849 604 608 604
query30 263 170 175 170
query31 966 779 756 756
query32 97 50 52 50
query33 484 267 255 255
query34 849 471 460 460
query35 716 589 595 589
query36 1055 926 922 922
query37 106 67 69 67
query38 2898 2785 2737 2737
query39 858 781 792 781
query40 194 124 120 120
query41 48 42 42 42
query42 103 95 100 95
query43 584 572 541 541
query44 1080 722 751 722
query45 183 164 167 164
query46 1059 703 783 703
query47 1858 1794 1815 1794
query48 361 301 288 288
query49 818 372 382 372
query50 754 379 376 376
query51 6870 6697 6805 6697
query52 102 88 90 88
query53 347 275 291 275
query54 534 433 416 416
query55 74 74 72 72
query56 249 236 263 236
query57 1142 1053 1066 1053
query58 225 211 207 207
query59 3397 3207 3247 3207
query60 309 248 244 244
query61 85 89 84 84
query62 588 458 443 443
query63 303 279 278 278
query64 8390 2211 1754 1754
query65 3203 3079 3095 3079
query66 785 319 326 319
query67 15034 14646 14760 14646
query68 4463 529 530 529
query69 436 259 274 259
query70 1177 1066 1163 1066
query71 374 268 263 263
query72 7700 5491 2735 2735
query73 704 321 326 321
query74 6000 5695 5593 5593
query75 3303 2626 2609 2609
query76 2309 991 968 968
query77 388 272 267 267
query78 10304 9934 9750 9750
query79 2432 506 496 496
query80 1018 432 425 425
query81 533 244 242 242
query82 1278 91 95 91
query83 241 166 169 166
query84 247 99 87 87
query85 1287 266 256 256
query86 482 304 283 283
query87 3347 3104 3145 3104
query88 4080 2356 2340 2340
query89 454 383 369 369
query90 2067 194 182 182
query91 119 94 146 94
query92 63 46 48 46
query93 2677 515 502 502
query94 1308 180 185 180
query95 399 303 307 303
query96 589 264 267 264
query97 3187 3000 3045 3000
query98 244 223 217 217
query99 1111 871 855 855
Total cold run time: 260648 ms
Total hot run time: 168090 ms
ClickBench: Total hot run time: 30.14 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit b73f2549e45cb9928b4a39b084f4939152564e79, data reload: false
query1 0.04 0.03 0.03
query2 0.08 0.04 0.04
query3 0.23 0.05 0.05
query4 1.67 0.07 0.07
query5 0.50 0.48 0.48
query6 1.11 0.71 0.74
query7 0.02 0.02 0.02
query8 0.06 0.04 0.05
query9 0.54 0.49 0.49
query10 0.54 0.54 0.55
query11 0.15 0.12 0.12
query12 0.15 0.12 0.12
query13 0.60 0.58 0.59
query14 0.78 0.76 0.78
query15 0.83 0.81 0.81
query16 0.36 0.36 0.37
query17 0.93 0.99 1.02
query18 0.22 0.26 0.22
query19 1.73 1.68 1.66
query20 0.01 0.02 0.01
query21 15.50 0.69 0.67
query22 4.46 7.37 1.66
query23 18.25 1.35 1.31
query24 1.62 0.32 0.19
query25 0.14 0.09 0.08
query26 0.26 0.15 0.17
query27 0.07 0.08 0.07
query28 13.36 1.01 0.99
query29 12.68 3.27 3.24
query30 0.24 0.05 0.08
query31 2.84 0.38 0.39
query32 3.30 0.46 0.46
query33 2.85 2.98 2.83
query34 17.16 4.41 4.42
query35 4.49 4.53 4.49
query36 0.69 0.49 0.48
query37 0.18 0.15 0.14
query38 0.15 0.14 0.14
query39 0.04 0.03 0.03
query40 0.17 0.14 0.15
query41 0.09 0.05 0.05
query42 0.06 0.05 0.06
query43 0.04 0.04 0.03
Total cold run time: 109.19 s
Total hot run time: 30.14 s