doris icon indicating copy to clipboard operation
doris copied to clipboard

[bugfix](hive)Partition fields in wrong order

Open wuwenchi opened this issue 1 year ago • 20 comments

Proposed changes

Wrong order of partition fields will lead to wrong order of actual partitions. When converting doris chema to hive spartiton, it needs to be passed according to the partition by field order.

Further comments

If this is a relatively large or complex change, kick off the discussion at [email protected] by explaining why you chose the solution you did and what alternatives you considered, etc...

wuwenchi avatar May 24 '24 02:05 wuwenchi

Thank you for your contribution to Apache Doris. Don't know what should be done next? See How to process your PR

Since 2024-03-18, the Document has been moved to doris-website. See Doris Document.

doris-robot avatar May 24 '24 02:05 doris-robot

run buildall

wuwenchi avatar May 24 '24 02:05 wuwenchi

TPC-H: Total hot run time: 40115 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit a41f370d17ea9392db2fb29873a1ad603da3ac88, data reload: false

------ Round 1 ----------------------------------
q1	17622	4278	4228	4228
q2	2011	198	205	198
q3	10502	1240	1236	1236
q4	10634	842	870	842
q5	7510	2685	2629	2629
q6	219	138	135	135
q7	967	618	605	605
q8	9301	2129	2089	2089
q9	8779	6608	6634	6608
q10	9294	3712	3727	3712
q11	441	250	232	232
q12	412	230	215	215
q13	17760	2985	2981	2981
q14	264	216	225	216
q15	517	474	459	459
q16	519	387	378	378
q17	956	689	730	689
q18	8075	7396	7444	7396
q19	4513	1529	1496	1496
q20	647	298	300	298
q21	4939	3199	3969	3199
q22	333	274	279	274
Total cold run time: 116215 ms
Total hot run time: 40115 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4381	4218	4171	4171
q2	373	259	277	259
q3	2968	2784	2710	2710
q4	1887	1585	1579	1579
q5	5221	5288	5311	5288
q6	211	126	126	126
q7	2155	1721	1796	1721
q8	3170	3326	3310	3310
q9	8344	8280	8332	8280
q10	3885	3733	3689	3689
q11	597	491	486	486
q12	755	575	610	575
q13	17313	2959	2988	2959
q14	295	254	250	250
q15	515	477	475	475
q16	467	412	431	412
q17	1764	1462	1462	1462
q18	7658	7599	7449	7449
q19	1642	1530	1569	1530
q20	1978	1782	1802	1782
q21	4897	4929	4757	4757
q22	573	502	473	473
Total cold run time: 71049 ms
Total hot run time: 53743 ms

doris-robot avatar May 24 '24 02:05 doris-robot

TPC-DS: Total hot run time: 171793 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit a41f370d17ea9392db2fb29873a1ad603da3ac88, data reload: false

query1	925	364	364	364
query2	6455	2591	2319	2319
query3	6662	208	207	207
query4	18985	17434	17295	17295
query5	4172	411	416	411
query6	244	158	154	154
query7	4594	300	288	288
query8	243	199	187	187
query9	8481	2389	2361	2361
query10	454	288	277	277
query11	10585	10262	10189	10189
query12	135	107	83	83
query13	1633	355	359	355
query14	10032	6038	7533	6038
query15	218	170	168	168
query16	7816	268	261	261
query17	1842	521	512	512
query18	1970	270	279	270
query19	206	163	156	156
query20	95	85	89	85
query21	197	132	126	126
query22	4305	4046	3958	3958
query23	33567	33146	33180	33146
query24	11309	2855	2820	2820
query25	639	353	354	353
query26	1643	173	169	169
query27	3002	327	323	323
query28	7516	2037	2038	2037
query29	1071	623	593	593
query30	301	173	174	173
query31	941	739	750	739
query32	98	54	52	52
query33	762	260	257	257
query34	1042	470	472	470
query35	730	595	597	595
query36	1058	920	893	893
query37	139	71	74	71
query38	2868	2809	2775	2775
query39	838	814	814	814
query40	270	126	124	124
query41	51	43	43	43
query42	105	93	97	93
query43	566	576	543	543
query44	1221	718	723	718
query45	183	161	167	161
query46	1075	706	715	706
query47	1848	1743	1752	1743
query48	403	293	288	288
query49	1151	373	378	373
query50	769	378	381	378
query51	6924	6728	6763	6728
query52	103	90	87	87
query53	348	283	281	281
query54	1000	428	430	428
query55	76	74	70	70
query56	254	237	250	237
query57	1140	1044	1048	1044
query58	243	210	215	210
query59	3319	3234	3305	3234
query60	277	250	245	245
query61	88	87	121	87
query62	651	445	473	445
query63	311	282	279	279
query64	9854	2190	1695	1695
query65	3233	3098	3109	3098
query66	1387	345	326	326
query67	15027	14975	14776	14776
query68	4539	534	526	526
query69	454	278	281	278
query70	1107	1095	1123	1095
query71	408	275	263	263
query72	7604	5541	5578	5541
query73	709	327	320	320
query74	6010	5629	5684	5629
query75	3357	2671	2607	2607
query76	2570	942	996	942
query77	401	268	269	268
query78	10504	9820	9845	9820
query79	2303	521	516	516
query80	1775	463	441	441
query81	543	242	249	242
query82	703	101	99	99
query83	288	184	186	184
query84	275	88	94	88
query85	1953	312	312	312
query86	487	315	311	311
query87	3305	3116	3155	3116
query88	3988	2345	2336	2336
query89	483	386	380	380
query90	1986	192	192	192
query91	136	108	106	106
query92	63	52	52	52
query93	2428	502	491	491
query94	1262	193	191	191
query95	415	317	317	317
query96	605	265	269	265
query97	3168	3023	3011	3011
query98	352	214	262	214
query99	1208	856	862	856
Total cold run time: 275039 ms
Total hot run time: 171793 ms

doris-robot avatar May 24 '24 03:05 doris-robot

ClickBench: Total hot run time: 30.87 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit a41f370d17ea9392db2fb29873a1ad603da3ac88, data reload: false

query1	0.04	0.03	0.03
query2	0.09	0.04	0.04
query3	0.23	0.05	0.06
query4	1.66	0.08	0.07
query5	0.50	0.49	0.51
query6	1.12	0.72	0.72
query7	0.02	0.01	0.01
query8	0.05	0.04	0.04
query9	0.55	0.50	0.48
query10	0.54	0.55	0.55
query11	0.16	0.12	0.11
query12	0.15	0.12	0.12
query13	0.59	0.59	0.59
query14	0.77	0.78	0.77
query15	0.83	0.81	0.82
query16	0.36	0.37	0.36
query17	1.03	0.93	1.00
query18	0.23	0.22	0.25
query19	1.84	1.76	1.73
query20	0.02	0.01	0.01
query21	15.50	0.67	0.65
query22	4.36	7.05	2.24
query23	18.40	1.47	1.38
query24	1.72	0.27	0.23
query25	0.15	0.09	0.08
query26	0.27	0.17	0.16
query27	0.08	0.08	0.07
query28	13.28	1.02	0.99
query29	13.17	3.26	3.24
query30	0.24	0.06	0.05
query31	2.85	0.38	0.39
query32	3.28	0.48	0.47
query33	2.92	2.81	2.93
query34	17.19	4.46	4.47
query35	4.48	4.50	4.49
query36	0.65	0.46	0.47
query37	0.17	0.15	0.16
query38	0.16	0.15	0.14
query39	0.04	0.04	0.04
query40	0.16	0.14	0.15
query41	0.09	0.04	0.04
query42	0.05	0.05	0.04
query43	0.04	0.03	0.03
Total cold run time: 110.03 s
Total hot run time: 30.87 s

doris-robot avatar May 24 '24 03:05 doris-robot

run buildall

wuwenchi avatar May 26 '24 08:05 wuwenchi

TPC-H: Total hot run time: 41181 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit e524f3ee17c55da29857b93b75d46aea060ec8f6, data reload: false

------ Round 1 ----------------------------------
q1	17618	4314	4345	4314
q2	2022	194	193	193
q3	10469	1173	1243	1173
q4	10187	817	777	777
q5	7521	2686	2836	2686
q6	218	132	143	132
q7	953	614	609	609
q8	9607	2123	2075	2075
q9	10623	6649	6680	6649
q10	9141	3951	3859	3859
q11	469	244	248	244
q12	518	234	256	234
q13	17271	3289	3221	3221
q14	267	225	226	225
q15	514	484	472	472
q16	517	408	405	405
q17	986	705	776	705
q18	8373	7954	7808	7808
q19	5367	1552	1502	1502
q20	1084	306	324	306
q21	5143	3305	4090	3305
q22	365	287	296	287
Total cold run time: 119233 ms
Total hot run time: 41181 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4596	4343	4385	4343
q2	500	265	286	265
q3	3167	2904	2860	2860
q4	2059	1771	1672	1672
q5	5304	5453	5502	5453
q6	220	128	132	128
q7	2186	1877	1824	1824
q8	3228	3429	3398	3398
q9	8736	8702	8810	8702
q10	4179	3958	3757	3757
q11	579	490	493	490
q12	813	634	618	618
q13	16229	3175	3175	3175
q14	305	276	259	259
q15	518	477	472	472
q16	495	426	445	426
q17	1793	1538	1502	1502
q18	7883	7460	7434	7434
q19	1675	1566	1497	1497
q20	2002	1780	1808	1780
q21	4808	4754	4753	4753
q22	573	493	490	490
Total cold run time: 71848 ms
Total hot run time: 55298 ms

doris-robot avatar May 26 '24 08:05 doris-robot

TPC-DS: Total hot run time: 169060 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit e524f3ee17c55da29857b93b75d46aea060ec8f6, data reload: false

query1	903	369	368	368
query2	6824	2500	2298	2298
query3	6653	210	212	210
query4	19166	17457	17285	17285
query5	4149	426	443	426
query6	236	159	160	159
query7	4589	294	286	286
query8	236	193	191	191
query9	8623	2368	2358	2358
query10	455	280	285	280
query11	10506	10032	10130	10032
query12	137	88	90	88
query13	1641	370	371	370
query14	9236	7546	6670	6670
query15	213	166	167	166
query16	7268	266	257	257
query17	1314	533	533	533
query18	1209	273	265	265
query19	195	153	154	153
query20	92	86	83	83
query21	191	133	130	130
query22	4064	3942	3839	3839
query23	33694	33396	32941	32941
query24	5070	2902	2767	2767
query25	483	354	358	354
query26	687	160	157	157
query27	1836	328	327	327
query28	3734	2027	2054	2027
query29	859	598	593	593
query30	257	171	177	171
query31	927	782	746	746
query32	58	52	55	52
query33	495	270	257	257
query34	877	464	464	464
query35	725	599	587	587
query36	1044	915	914	914
query37	108	68	72	68
query38	2865	2815	2817	2815
query39	863	801	778	778
query40	196	125	122	122
query41	47	45	43	43
query42	103	102	95	95
query43	614	571	552	552
query44	1074	715	729	715
query45	184	163	163	163
query46	1063	704	742	704
query47	1855	1774	1795	1774
query48	385	290	284	284
query49	761	375	381	375
query50	764	384	392	384
query51	6899	6865	6796	6796
query52	111	92	92	92
query53	354	275	282	275
query54	543	436	419	419
query55	78	73	73	73
query56	258	247	279	247
query57	1122	1063	1024	1024
query58	212	210	206	206
query59	3638	3340	3554	3340
query60	271	255	254	254
query61	93	87	87	87
query62	548	441	437	437
query63	307	280	283	280
query64	2559	1836	1736	1736
query65	3176	3078	3089	3078
query66	719	341	317	317
query67	15121	14607	14893	14607
query68	4506	534	550	534
query69	439	269	268	268
query70	1164	1126	1138	1126
query71	360	279	269	269
query72	7515	5214	2708	2708
query73	720	322	321	321
query74	6019	5659	5637	5637
query75	3275	2647	2607	2607
query76	2180	1042	940	940
query77	394	262	268	262
query78	10330	9890	9800	9800
query79	1574	513	519	513
query80	1100	449	430	430
query81	523	244	249	244
query82	934	94	94	94
query83	254	168	172	168
query84	253	85	84	84
query85	918	280	267	267
query86	415	304	316	304
query87	3362	3109	3137	3109
query88	3375	2325	2334	2325
query89	501	394	393	393
query90	1996	197	192	192
query91	140	129	111	111
query92	65	52	52	52
query93	1436	526	493	493
query94	1064	204	200	200
query95	408	327	314	314
query96	588	262	263	262
query97	3190	3029	3025	3025
query98	246	222	219	219
query99	1164	845	850	845
Total cold run time: 245945 ms
Total hot run time: 169060 ms

doris-robot avatar May 26 '24 08:05 doris-robot

ClickBench: Total hot run time: 31.08 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit e524f3ee17c55da29857b93b75d46aea060ec8f6, data reload: false

query1	0.04	0.04	0.04
query2	0.09	0.04	0.04
query3	0.23	0.05	0.06
query4	1.66	0.09	0.07
query5	0.49	0.48	0.49
query6	1.11	0.73	0.72
query7	0.02	0.02	0.01
query8	0.05	0.04	0.04
query9	0.55	0.49	0.49
query10	0.53	0.55	0.53
query11	0.16	0.11	0.11
query12	0.15	0.12	0.11
query13	0.60	0.59	0.61
query14	0.76	0.79	0.76
query15	0.83	0.81	0.82
query16	0.37	0.36	0.35
query17	1.02	1.01	0.98
query18	0.24	0.23	0.22
query19	1.81	1.78	1.69
query20	0.01	0.01	0.01
query21	15.52	0.68	0.68
query22	4.31	6.07	2.62
query23	18.29	1.39	1.23
query24	2.00	0.22	0.21
query25	0.15	0.09	0.09
query26	0.26	0.17	0.17
query27	0.08	0.08	0.08
query28	13.28	1.01	0.98
query29	13.35	3.26	3.24
query30	0.24	0.06	0.06
query31	2.87	0.38	0.38
query32	3.29	0.46	0.46
query33	2.96	2.82	2.90
query34	17.24	4.39	4.43
query35	4.48	4.53	4.62
query36	0.65	0.46	0.46
query37	0.18	0.16	0.15
query38	0.15	0.15	0.14
query39	0.04	0.04	0.03
query40	0.16	0.14	0.14
query41	0.09	0.05	0.05
query42	0.06	0.05	0.04
query43	0.04	0.03	0.04
Total cold run time: 110.41 s
Total hot run time: 31.08 s

doris-robot avatar May 26 '24 08:05 doris-robot

run buildall

wuwenchi avatar May 26 '24 10:05 wuwenchi

TPC-H: Total hot run time: 41566 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 604da4ae43656ea4adcdd7d230ab5e83c00faca1, data reload: false

------ Round 1 ----------------------------------
q1	17618	4350	4279	4279
q2	2005	191	190	190
q3	10456	1253	1268	1253
q4	10205	847	797	797
q5	7488	2724	2709	2709
q6	213	134	140	134
q7	954	617	604	604
q8	9217	2125	2100	2100
q9	9394	6618	6733	6618
q10	9065	3857	3806	3806
q11	471	234	233	233
q12	454	224	224	224
q13	17220	3240	3259	3240
q14	264	224	226	224
q15	531	476	476	476
q16	503	403	382	382
q17	985	704	624	624
q18	8196	7892	7740	7740
q19	6114	1536	1490	1490
q20	644	321	320	320
q21	5145	3855	3999	3855
q22	335	268	288	268
Total cold run time: 117477 ms
Total hot run time: 41566 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4492	4374	4352	4352
q2	386	282	282	282
q3	3149	2897	2894	2894
q4	1953	1670	1636	1636
q5	5294	5527	5480	5480
q6	216	127	131	127
q7	2190	1830	1826	1826
q8	3180	3404	3404	3404
q9	8678	8607	8639	8607
q10	4096	3837	3718	3718
q11	555	477	483	477
q12	791	590	664	590
q13	17177	3102	3135	3102
q14	290	273	271	271
q15	516	493	481	481
q16	509	431	432	431
q17	1806	1561	1495	1495
q18	7895	7577	7394	7394
q19	1640	1510	1538	1510
q20	1971	1756	1773	1756
q21	8265	4621	4557	4557
q22	549	486	479	479
Total cold run time: 75598 ms
Total hot run time: 54869 ms

doris-robot avatar May 26 '24 11:05 doris-robot

TPC-DS: Total hot run time: 169903 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 604da4ae43656ea4adcdd7d230ab5e83c00faca1, data reload: false

query1	926	394	365	365
query2	6427	2389	2370	2370
query3	6648	211	209	209
query4	19316	17353	17626	17353
query5	4094	410	421	410
query6	237	156	153	153
query7	4585	297	296	296
query8	240	183	185	183
query9	8408	2371	2338	2338
query10	442	273	257	257
query11	10470	10279	10224	10224
query12	140	85	91	85
query13	1644	365	390	365
query14	9258	7528	7423	7423
query15	232	175	170	170
query16	7906	266	263	263
query17	1749	530	510	510
query18	1957	285	266	266
query19	198	151	151	151
query20	91	103	89	89
query21	199	134	125	125
query22	4290	4133	4198	4133
query23	33635	33103	33002	33002
query24	6618	2726	2792	2726
query25	517	351	353	351
query26	689	153	156	153
query27	1907	346	312	312
query28	3652	2052	2035	2035
query29	839	605	596	596
query30	260	177	178	177
query31	977	750	763	750
query32	98	62	54	54
query33	497	276	266	266
query34	866	491	485	485
query35	705	616	602	602
query36	1084	906	924	906
query37	110	69	78	69
query38	2961	2763	2764	2763
query39	852	796	804	796
query40	198	122	122	122
query41	44	47	42	42
query42	98	98	95	95
query43	592	557	531	531
query44	1086	711	741	711
query45	182	162	162	162
query46	1054	703	712	703
query47	1867	1762	1789	1762
query48	357	287	293	287
query49	754	364	376	364
query50	760	394	381	381
query51	6943	6747	6708	6708
query52	108	90	89	89
query53	345	278	294	278
query54	519	426	425	425
query55	78	75	71	71
query56	258	234	241	234
query57	1115	1041	1026	1026
query58	230	208	207	207
query59	3357	3186	3209	3186
query60	273	251	249	249
query61	92	100	84	84
query62	564	456	441	441
query63	308	293	279	279
query64	8364	2203	1776	1776
query65	3164	3136	3137	3136
query66	790	338	325	325
query67	15226	14887	15042	14887
query68	4627	540	535	535
query69	450	261	267	261
query70	1186	1132	1070	1070
query71	388	268	273	268
query72	7328	2759	2503	2503
query73	717	328	317	317
query74	6033	5669	5581	5581
query75	3328	2575	2613	2575
query76	2203	953	936	936
query77	378	264	264	264
query78	10266	10145	9735	9735
query79	1957	505	516	505
query80	680	434	429	429
query81	490	244	239	239
query82	910	94	90	90
query83	187	163	164	163
query84	252	80	84	80
query85	968	262	352	262
query86	443	316	294	294
query87	3305	3121	3131	3121
query88	3772	2313	2325	2313
query89	470	397	382	382
query90	2170	184	183	183
query91	120	94	97	94
query92	55	49	51	49
query93	2171	510	501	501
query94	1077	185	182	182
query95	392	325	305	305
query96	581	265	262	262
query97	3228	2997	3001	2997
query98	231	239	214	214
query99	1155	868	851	851
Total cold run time: 255968 ms
Total hot run time: 169903 ms

doris-robot avatar May 26 '24 11:05 doris-robot

ClickBench: Total hot run time: 30.24 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 604da4ae43656ea4adcdd7d230ab5e83c00faca1, data reload: false

query1	0.03	0.03	0.04
query2	0.08	0.04	0.04
query3	0.24	0.05	0.05
query4	1.67	0.07	0.11
query5	0.50	0.50	0.51
query6	1.12	0.72	0.72
query7	0.02	0.01	0.02
query8	0.05	0.05	0.04
query9	0.54	0.50	0.49
query10	0.55	0.55	0.54
query11	0.16	0.12	0.12
query12	0.15	0.12	0.11
query13	0.60	0.58	0.59
query14	0.78	0.77	0.77
query15	0.84	0.80	0.82
query16	0.39	0.37	0.38
query17	1.01	0.98	0.99
query18	0.23	0.23	0.25
query19	1.73	1.75	1.76
query20	0.02	0.01	0.01
query21	15.46	0.71	0.68
query22	5.34	6.49	1.79
query23	18.28	1.34	1.20
query24	1.63	0.25	0.28
query25	0.14	0.09	0.07
query26	0.26	0.16	0.16
query27	0.08	0.07	0.07
query28	13.27	1.02	0.99
query29	13.15	3.28	3.20
query30	0.24	0.05	0.06
query31	2.88	0.37	0.38
query32	3.31	0.47	0.46
query33	2.86	2.83	2.86
query34	17.24	4.45	4.41
query35	4.49	4.47	4.62
query36	0.66	0.45	0.48
query37	0.17	0.15	0.15
query38	0.14	0.14	0.14
query39	0.04	0.04	0.03
query40	0.16	0.16	0.14
query41	0.08	0.04	0.04
query42	0.05	0.05	0.04
query43	0.04	0.04	0.04
Total cold run time: 110.68 s
Total hot run time: 30.24 s

doris-robot avatar May 26 '24 11:05 doris-robot

PR approved by at least one committer and no changes requested.

github-actions[bot] avatar May 27 '24 03:05 github-actions[bot]

PR approved by anyone and no changes requested.

github-actions[bot] avatar May 27 '24 03:05 github-actions[bot]

run buildall

wuwenchi avatar May 27 '24 04:05 wuwenchi

TPC-H: Total hot run time: 40966 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 59c6b5de80b66ea31b30b90245860e01449331f0, data reload: false

------ Round 1 ----------------------------------
q1	17618	4344	4246	4246
q2	2016	184	184	184
q3	10472	1252	1269	1252
q4	10204	784	858	784
q5	7481	2739	2745	2739
q6	223	133	133	133
q7	958	607	606	606
q8	9207	2130	2089	2089
q9	9297	6686	6709	6686
q10	9206	3961	3927	3927
q11	418	251	238	238
q12	447	224	222	222
q13	17398	3180	3248	3180
q14	260	209	222	209
q15	502	474	472	472
q16	508	396	387	387
q17	973	656	693	656
q18	8484	7782	7694	7694
q19	3584	1546	1491	1491
q20	624	320	308	308
q21	5079	3183	3964	3183
q22	355	280	280	280
Total cold run time: 115314 ms
Total hot run time: 40966 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4522	4444	4435	4435
q2	378	260	271	260
q3	3142	2948	2969	2948
q4	1960	1615	1568	1568
q5	5352	5468	5516	5468
q6	213	123	121	121
q7	2207	1826	1863	1826
q8	3249	3436	3448	3436
q9	8541	8680	8650	8650
q10	3998	3723	3826	3723
q11	585	491	509	491
q12	842	645	618	618
q13	16985	3151	3160	3151
q14	307	297	292	292
q15	517	481	490	481
q16	506	446	439	439
q17	1785	1471	1491	1471
q18	7842	7693	7336	7336
q19	1810	1535	1509	1509
q20	1986	1787	1789	1787
q21	8775	4733	4741	4733
q22	606	491	491	491
Total cold run time: 76108 ms
Total hot run time: 55234 ms

doris-robot avatar May 27 '24 05:05 doris-robot

TPC-DS: Total hot run time: 168715 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 59c6b5de80b66ea31b30b90245860e01449331f0, data reload: false

query1	911	379	368	368
query2	6444	2569	2377	2377
query3	6637	205	210	205
query4	20945	17380	17114	17114
query5	4093	431	416	416
query6	246	154	154	154
query7	4585	292	289	289
query8	240	182	181	181
query9	8799	2358	2349	2349
query10	455	283	266	266
query11	10583	10193	10133	10133
query12	129	89	88	88
query13	1628	363	370	363
query14	9359	6881	6859	6859
query15	221	162	167	162
query16	7418	250	255	250
query17	1324	531	526	526
query18	1902	264	270	264
query19	199	159	154	154
query20	86	85	80	80
query21	192	129	129	129
query22	4101	3985	4001	3985
query23	33625	33042	32987	32987
query24	7880	2837	2820	2820
query25	568	354	357	354
query26	731	155	152	152
query27	2231	316	329	316
query28	5439	2031	2030	2030
query29	841	593	601	593
query30	220	153	148	148
query31	950	767	727	727
query32	85	51	51	51
query33	544	270	262	262
query34	881	464	473	464
query35	679	616	599	599
query36	1051	953	918	918
query37	102	67	68	67
query38	2922	2811	2802	2802
query39	822	770	796	770
query40	197	127	125	125
query41	49	48	46	46
query42	105	102	99	99
query43	618	558	526	526
query44	1064	739	756	739
query45	179	157	161	157
query46	1053	699	709	699
query47	1866	1748	1757	1748
query48	368	295	309	295
query49	834	384	382	382
query50	762	378	384	378
query51	6959	6836	6724	6724
query52	109	91	91	91
query53	347	296	297	296
query54	551	439	423	423
query55	74	70	73	70
query56	253	241	247	241
query57	1130	1041	1039	1039
query58	232	210	227	210
query59	3536	3237	3242	3237
query60	268	251	247	247
query61	91	89	85	85
query62	585	436	450	436
query63	316	283	280	280
query64	8485	2204	1687	1687
query65	3165	3083	3096	3083
query66	826	326	322	322
query67	15192	15077	14649	14649
query68	4861	527	530	527
query69	492	264	265	264
query70	1186	1121	1163	1121
query71	410	265	267	265
query72	8168	2684	2525	2525
query73	716	319	321	319
query74	6054	5610	5530	5530
query75	3399	2660	2661	2660
query76	3189	995	1016	995
query77	643	262	256	256
query78	10166	9934	9601	9601
query79	2072	515	503	503
query80	1632	441	430	430
query81	525	216	222	216
query82	812	90	89	89
query83	288	163	181	163
query84	257	87	85	85
query85	1439	256	257	256
query86	481	292	276	276
query87	3266	3130	3150	3130
query88	4131	2435	2436	2435
query89	467	381	378	378
query90	2015	183	189	183
query91	125	93	97	93
query92	58	50	50	50
query93	2428	517	491	491
query94	1278	195	191	191
query95	411	319	380	319
query96	592	277	268	268
query97	3202	3006	2961	2961
query98	243	209	218	209
query99	1170	840	841	840
Total cold run time: 265458 ms
Total hot run time: 168715 ms

doris-robot avatar May 27 '24 05:05 doris-robot

ClickBench: Total hot run time: 31.12 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 59c6b5de80b66ea31b30b90245860e01449331f0, data reload: false

query1	0.03	0.03	0.03
query2	0.08	0.04	0.04
query3	0.23	0.05	0.05
query4	1.68	0.07	0.08
query5	0.48	0.50	0.50
query6	1.13	0.72	0.72
query7	0.02	0.01	0.01
query8	0.05	0.04	0.03
query9	0.53	0.49	0.48
query10	0.54	0.55	0.53
query11	0.15	0.11	0.11
query12	0.15	0.12	0.12
query13	0.59	0.59	0.59
query14	0.77	0.76	0.80
query15	0.83	0.81	0.81
query16	0.36	0.36	0.36
query17	0.98	1.00	1.00
query18	0.24	0.24	0.24
query19	1.77	1.73	1.69
query20	0.01	0.00	0.01
query21	15.72	0.66	0.65
query22	4.37	6.21	2.58
query23	18.24	1.36	1.16
query24	1.62	0.31	0.22
query25	0.15	0.09	0.08
query26	0.28	0.18	0.18
query27	0.08	0.08	0.08
query28	13.32	1.01	0.99
query29	12.99	3.33	3.26
query30	0.24	0.06	0.05
query31	2.87	0.39	0.39
query32	3.27	0.45	0.47
query33	2.88	2.89	2.87
query34	17.08	4.46	4.45
query35	4.48	4.51	4.49
query36	0.67	0.49	0.48
query37	0.17	0.15	0.16
query38	0.15	0.15	0.15
query39	0.04	0.03	0.04
query40	0.16	0.14	0.14
query41	0.09	0.04	0.04
query42	0.06	0.05	0.05
query43	0.03	0.04	0.04
Total cold run time: 109.58 s
Total hot run time: 31.12 s

doris-robot avatar May 27 '24 05:05 doris-robot

PR approved by at least one committer and no changes requested.

github-actions[bot] avatar May 27 '24 08:05 github-actions[bot]