doris icon indicating copy to clipboard operation
doris copied to clipboard

[fix](session variables) Limit query_timeout to within LoadTimeout

Open wyxxxcat opened this issue 6 months ago • 22 comments

quert_timeout is greater than Config.loadTImeout, every loadJob will fail image if session quert_timeout > Config.loadTImeout, loadTimeout set Config.loadTImeout, else set quert_timeout

Release note

None

Check List (For Author)

  • Test

    • [ ] Regression test
    • [ ] Unit Test
    • [ ] Manual test (add detailed scripts or steps below)
    • [ ] No need to test or manual test. Explain why:
      • [ ] This is a refactor/code format and no logic has been changed.
      • [ ] Previous test can cover this change.
      • [ ] No code files have been changed.
      • [ ] Other reason
  • Behavior changed:

    • [ ] No.
    • [ ] Yes.
  • Does this need documentation?

    • [ ] No.
    • [ ] Yes.

Check List (For Reviewer who merge this PR)

  • [ ] Confirm the release note
  • [ ] Confirm test cases
  • [ ] Confirm document
  • [ ] Add branch pick label

wyxxxcat avatar May 26 '25 01:05 wyxxxcat

Thank you for your contribution to Apache Doris. Don't know what should be done next? See How to process your PR.

Please clearly describe your PR:

  1. What problem was fixed (it's best to include specific error reporting information). How it was fixed.
  2. Which behaviors were modified. What was the previous behavior, what is it now, why was it modified, and what possible impacts might there be.
  3. What features were added. Why was this function added?
  4. Which code was refactored and why was this part of the code refactored?
  5. Which functions were optimized and what is the difference before and after the optimization?

hello-stephen avatar May 26 '25 01:05 hello-stephen

run buildall

wyxxxcat avatar May 26 '25 01:05 wyxxxcat

PR approved by at least one committer and no changes requested.

github-actions[bot] avatar May 26 '25 02:05 github-actions[bot]

PR approved by anyone and no changes requested.

github-actions[bot] avatar May 26 '25 02:05 github-actions[bot]

TPC-H: Total hot run time: 33726 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 9eab00a50a471638528c3ed60072522bcc2c2fb6, data reload: false

------ Round 1 ----------------------------------
q1	26148	5019	4975	4975
q2	2072	283	177	177
q3	10385	1207	694	694
q4	10216	1028	523	523
q5	7555	2362	2312	2312
q6	178	161	131	131
q7	913	710	610	610
q8	9317	1293	1104	1104
q9	6772	5060	5017	5017
q10	6824	2319	1900	1900
q11	505	293	286	286
q12	343	347	217	217
q13	17767	3704	3109	3109
q14	225	222	224	222
q15	525	476	498	476
q16	412	434	373	373
q17	609	855	377	377
q18	7666	7127	7106	7106
q19	1422	959	541	541
q20	344	336	233	233
q21	3740	2559	2355	2355
q22	1043	1011	988	988
Total cold run time: 114981 ms
Total hot run time: 33726 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5171	5108	5272	5108
q2	240	324	227	227
q3	2234	2649	2442	2442
q4	1397	1774	1331	1331
q5	4472	4431	4488	4431
q6	225	174	133	133
q7	2042	1973	1824	1824
q8	2603	2605	2592	2592
q9	7363	7252	7079	7079
q10	3077	3208	2786	2786
q11	582	514	511	511
q12	694	811	637	637
q13	3492	4217	3591	3591
q14	314	342	311	311
q15	543	491	484	484
q16	472	500	466	466
q17	1211	1575	1446	1446
q18	8312	8127	7440	7440
q19	2700	827	880	827
q20	2042	2074	1961	1961
q21	4823	4390	4336	4336
q22	1114	1060	1035	1035
Total cold run time: 55123 ms
Total hot run time: 50998 ms

doris-robot avatar May 26 '25 02:05 doris-robot

TPC-DS: Total hot run time: 193939 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 9eab00a50a471638528c3ed60072522bcc2c2fb6, data reload: false

query1	1424	1100	1081	1081
query2	6456	1774	1804	1774
query3	11065	4542	4351	4351
query4	54281	25069	23410	23410
query5	5205	627	459	459
query6	375	215	202	202
query7	4965	524	295	295
query8	333	256	246	246
query9	6072	2648	2640	2640
query10	437	346	282	282
query11	15076	15055	14887	14887
query12	159	118	111	111
query13	1085	540	432	432
query14	10224	6500	6398	6398
query15	210	211	183	183
query16	7053	652	500	500
query17	1096	770	637	637
query18	1575	416	320	320
query19	205	185	172	172
query20	134	121	121	121
query21	211	122	107	107
query22	4586	4612	4521	4521
query23	34456	33604	33710	33604
query24	6554	2413	2478	2413
query25	467	467	416	416
query26	701	281	156	156
query27	2192	513	357	357
query28	3128	2159	2130	2130
query29	588	572	435	435
query30	282	226	193	193
query31	842	852	799	799
query32	79	65	63	63
query33	442	379	330	330
query34	819	898	554	554
query35	804	861	780	780
query36	968	1013	906	906
query37	113	109	81	81
query38	4448	4312	4216	4216
query39	1553	1450	1483	1450
query40	227	127	112	112
query41	57	53	51	51
query42	135	116	113	113
query43	506	520	496	496
query44	1356	865	841	841
query45	185	175	166	166
query46	868	1022	666	666
query47	1897	1933	1813	1813
query48	406	433	328	328
query49	721	558	458	458
query50	662	703	429	429
query51	4336	4230	4222	4222
query52	117	114	99	99
query53	234	257	192	192
query54	603	604	529	529
query55	90	86	89	86
query56	315	334	295	295
query57	1232	1238	1193	1193
query58	274	276	264	264
query59	2787	2812	2779	2779
query60	336	331	309	309
query61	130	125	142	125
query62	716	746	681	681
query63	229	180	189	180
query64	1751	1020	684	684
query65	4255	4242	4223	4223
query66	719	408	321	321
query67	15963	15667	15449	15449
query68	6380	893	528	528
query69	532	318	275	275
query70	1232	1170	1140	1140
query71	486	328	296	296
query72	5843	4799	4885	4799
query73	1231	677	364	364
query74	9139	8943	8923	8923
query75	4111	3212	2710	2710
query76	4141	1206	771	771
query77	770	362	285	285
query78	10074	10127	9433	9433
query79	2621	815	582	582
query80	637	508	559	508
query81	482	255	224	224
query82	460	127	96	96
query83	299	255	233	233
query84	289	105	88	88
query85	793	358	316	316
query86	363	304	291	291
query87	4448	4443	4397	4397
query88	3615	2325	2322	2322
query89	411	315	284	284
query90	1894	208	205	205
query91	139	149	115	115
query92	82	59	55	55
query93	1872	931	586	586
query94	649	409	313	313
query95	365	296	283	283
query96	498	571	286	286
query97	2752	2754	2662	2662
query98	233	212	199	199
query99	1459	1411	1254	1254
Total cold run time: 300070 ms
Total hot run time: 193939 ms

doris-robot avatar May 26 '25 02:05 doris-robot

ClickBench: Total hot run time: 28.94 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 9eab00a50a471638528c3ed60072522bcc2c2fb6, data reload: false

query1	0.04	0.03	0.03
query2	0.12	0.10	0.12
query3	0.24	0.19	0.18
query4	1.60	0.19	0.19
query5	0.48	0.45	0.47
query6	1.47	0.66	0.66
query7	0.03	0.02	0.02
query8	0.04	0.03	0.03
query9	0.58	0.51	0.52
query10	0.57	0.58	0.56
query11	0.15	0.11	0.11
query12	0.15	0.11	0.11
query13	0.61	0.59	0.60
query14	0.79	0.81	0.81
query15	0.86	0.86	0.85
query16	0.38	0.37	0.37
query17	1.06	1.03	1.07
query18	0.22	0.21	0.20
query19	1.87	1.75	1.86
query20	0.01	0.01	0.02
query21	15.39	0.90	0.54
query22	0.74	1.12	0.74
query23	14.93	1.40	0.58
query24	6.88	1.68	0.73
query25	0.47	0.18	0.09
query26	0.65	0.16	0.13
query27	0.06	0.04	0.05
query28	9.34	0.87	0.43
query29	12.58	4.02	3.28
query30	0.25	0.09	0.07
query31	2.82	0.58	0.38
query32	3.24	0.56	0.47
query33	3.02	3.07	3.06
query34	15.90	5.06	4.51
query35	4.52	4.56	4.53
query36	0.68	0.48	0.48
query37	0.09	0.06	0.07
query38	0.04	0.04	0.04
query39	0.04	0.02	0.03
query40	0.17	0.14	0.12
query41	0.08	0.03	0.03
query42	0.03	0.02	0.03
query43	0.04	0.03	0.03
Total cold run time: 103.23 s
Total hot run time: 28.94 s

doris-robot avatar May 26 '25 02:05 doris-robot

run feut

wyxxxcat avatar May 26 '25 08:05 wyxxxcat

run buildall

wyxxxcat avatar May 27 '25 03:05 wyxxxcat

run buildall

wyxxxcat avatar May 28 '25 02:05 wyxxxcat

TPC-H: Total hot run time: 33862 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 7fcead1fd64c9993f798859dfe26fc63502a01a7, data reload: false

------ Round 1 ----------------------------------
q1	26483	5093	5119	5093
q2	2076	277	195	195
q3	10476	1248	681	681
q4	10234	982	513	513
q5	7564	2377	2329	2329
q6	181	160	132	132
q7	917	726	604	604
q8	9301	1239	1138	1138
q9	6837	5112	5053	5053
q10	6873	2298	1897	1897
q11	504	306	277	277
q12	337	357	221	221
q13	17778	3620	3070	3070
q14	231	229	214	214
q15	552	488	502	488
q16	411	436	366	366
q17	620	874	378	378
q18	7507	7213	7087	7087
q19	2190	1131	567	567
q20	336	335	219	219
q21	3668	3161	2366	2366
q22	1036	1020	974	974
Total cold run time: 116112 ms
Total hot run time: 33862 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5281	5084	5049	5049
q2	244	326	225	225
q3	2182	2671	2317	2317
q4	1331	1763	1368	1368
q5	4448	4399	4395	4395
q6	222	173	129	129
q7	2002	1940	1798	1798
q8	2610	2654	2576	2576
q9	7313	7270	7057	7057
q10	3000	3193	2784	2784
q11	595	514	496	496
q12	659	752	621	621
q13	3440	3911	3280	3280
q14	293	327	270	270
q15	539	480	477	477
q16	456	476	456	456
q17	1156	1574	1392	1392
q18	7831	7650	7417	7417
q19	783	879	1041	879
q20	2019	1965	1935	1935
q21	4927	4562	4387	4387
q22	1083	1057	1045	1045
Total cold run time: 52414 ms
Total hot run time: 50353 ms

doris-robot avatar May 28 '25 04:05 doris-robot

TPC-DS: Total hot run time: 192889 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 7fcead1fd64c9993f798859dfe26fc63502a01a7, data reload: false

query1	1411	1122	1046	1046
query2	6205	1803	1815	1803
query3	11020	4606	4539	4539
query4	52124	24335	23361	23361
query5	5247	616	461	461
query6	349	210	226	210
query7	4895	519	291	291
query8	324	271	248	248
query9	5502	2637	2615	2615
query10	458	323	276	276
query11	15046	15089	14906	14906
query12	160	113	107	107
query13	1055	523	413	413
query14	10096	6295	6251	6251
query15	217	204	180	180
query16	7125	667	523	523
query17	1109	753	571	571
query18	1550	401	306	306
query19	219	190	190	190
query20	131	125	120	120
query21	201	128	107	107
query22	4471	4422	4283	4283
query23	34296	33574	33613	33574
query24	6635	2430	2450	2430
query25	470	469	423	423
query26	671	281	154	154
query27	2310	517	342	342
query28	3127	2178	2155	2155
query29	576	560	438	438
query30	279	226	186	186
query31	841	834	800	800
query32	75	70	64	64
query33	452	372	314	314
query34	775	888	518	518
query35	797	817	765	765
query36	957	991	934	934
query37	123	98	82	82
query38	4141	4285	4268	4268
query39	1503	1469	1484	1469
query40	227	119	110	110
query41	60	60	62	60
query42	129	111	108	108
query43	505	506	488	488
query44	1344	863	847	847
query45	183	173	167	167
query46	855	1041	657	657
query47	1783	1879	1786	1786
query48	399	428	326	326
query49	666	498	430	430
query50	677	703	408	408
query51	4268	4252	4227	4227
query52	112	112	103	103
query53	230	261	194	194
query54	590	574	531	531
query55	89	84	86	84
query56	323	313	317	313
query57	1155	1169	1122	1122
query58	261	271	254	254
query59	2679	2658	2669	2658
query60	344	330	317	317
query61	128	123	141	123
query62	762	833	689	689
query63	242	195	194	194
query64	1589	1140	677	677
query65	4275	4231	4205	4205
query66	726	398	305	305
query67	15863	15586	15273	15273
query68	6187	901	523	523
query69	550	310	265	265
query70	1137	1125	1108	1108
query71	452	324	311	311
query72	5779	5047	5020	5020
query73	1358	730	357	357
query74	8931	9187	8785	8785
query75	3194	3182	2681	2681
query76	3845	1194	768	768
query77	533	368	288	288
query78	10050	10115	9365	9365
query79	2226	817	585	585
query80	614	509	425	425
query81	476	257	216	216
query82	258	134	96	96
query83	255	264	238	238
query84	299	100	81	81
query85	765	350	304	304
query86	363	302	297	297
query87	4396	4502	4320	4320
query88	3498	2286	2326	2286
query89	404	317	275	275
query90	1621	203	201	201
query91	146	146	112	112
query92	78	60	54	54
query93	1834	926	570	570
query94	693	402	310	310
query95	359	300	280	280
query96	508	572	275	275
query97	2766	2772	2633	2633
query98	225	205	203	203
query99	1365	1394	1278	1278
Total cold run time: 292572 ms
Total hot run time: 192889 ms

doris-robot avatar May 28 '25 04:05 doris-robot

ClickBench: Total hot run time: 28.76 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 7fcead1fd64c9993f798859dfe26fc63502a01a7, data reload: false

query1	0.04	0.04	0.04
query2	0.12	0.10	0.12
query3	0.26	0.20	0.19
query4	1.60	0.19	0.19
query5	0.45	0.45	0.47
query6	1.14	0.66	0.66
query7	0.03	0.02	0.02
query8	0.04	0.04	0.04
query9	0.61	0.53	0.52
query10	0.58	0.57	0.58
query11	0.16	0.11	0.11
query12	0.15	0.11	0.11
query13	0.63	0.61	0.60
query14	0.80	0.79	0.80
query15	0.89	0.86	0.89
query16	0.40	0.41	0.40
query17	1.04	1.08	1.04
query18	0.22	0.21	0.21
query19	1.94	1.87	1.82
query20	0.02	0.01	0.01
query21	15.41	0.86	0.54
query22	0.77	1.19	0.71
query23	14.85	1.39	0.64
query24	6.66	1.79	0.33
query25	0.50	0.15	0.09
query26	0.67	0.15	0.14
query27	0.04	0.05	0.06
query28	9.79	0.93	0.43
query29	12.56	3.97	3.28
query30	0.25	0.08	0.06
query31	2.83	0.61	0.38
query32	3.22	0.56	0.47
query33	3.07	3.11	3.15
query34	15.76	5.12	4.47
query35	4.50	4.54	4.52
query36	0.66	0.51	0.48
query37	0.09	0.06	0.06
query38	0.05	0.04	0.04
query39	0.03	0.02	0.02
query40	0.17	0.14	0.14
query41	0.08	0.03	0.02
query42	0.03	0.02	0.02
query43	0.04	0.03	0.03
Total cold run time: 103.15 s
Total hot run time: 28.76 s

doris-robot avatar May 28 '25 04:05 doris-robot

run buildall

wyxxxcat avatar May 30 '25 03:05 wyxxxcat

TPC-H: Total hot run time: 33755 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 483b87d86e9e1338d01d5624a45428e0b6b81ba0, data reload: false

------ Round 1 ----------------------------------
q1	26385	5193	4971	4971
q2	1969	291	188	188
q3	10399	1239	704	704
q4	10236	1008	520	520
q5	7686	2308	2404	2308
q6	182	163	128	128
q7	901	764	644	644
q8	9326	1326	1099	1099
q9	6832	5092	5168	5092
q10	6865	2314	1888	1888
q11	498	288	269	269
q12	347	354	214	214
q13	17769	3722	3065	3065
q14	232	231	214	214
q15	574	480	491	480
q16	436	436	379	379
q17	610	871	355	355
q18	7521	7183	7101	7101
q19	2072	978	575	575
q20	324	333	232	232
q21	3772	2557	2347	2347
q22	1032	1020	982	982
Total cold run time: 115968 ms
Total hot run time: 33755 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5184	5070	5120	5070
q2	237	327	220	220
q3	2169	2669	2262	2262
q4	1388	1763	1306	1306
q5	4579	4437	4386	4386
q6	215	170	126	126
q7	1965	1915	1694	1694
q8	2597	2548	2439	2439
q9	7163	7143	7206	7143
q10	3007	3173	2757	2757
q11	580	517	500	500
q12	673	773	625	625
q13	3505	3880	3342	3342
q14	286	302	255	255
q15	534	488	474	474
q16	444	478	434	434
q17	1145	1559	1420	1420
q18	7778	7475	7512	7475
q19	817	813	847	813
q20	2015	2025	1886	1886
q21	4822	4306	4239	4239
q22	1046	1030	1009	1009
Total cold run time: 52149 ms
Total hot run time: 49875 ms

doris-robot avatar May 30 '25 05:05 doris-robot

TPC-DS: Total hot run time: 182991 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 483b87d86e9e1338d01d5624a45428e0b6b81ba0, data reload: false

query1	1003	481	491	481
query2	6548	1821	1795	1795
query3	6757	216	220	216
query4	26289	23486	23317	23317
query5	4328	604	457	457
query6	306	206	214	206
query7	4627	498	298	298
query8	265	237	213	213
query9	8698	2643	2649	2643
query10	451	334	294	294
query11	15678	15066	14817	14817
query12	173	112	109	109
query13	1665	514	398	398
query14	9354	6110	6011	6011
query15	206	193	174	174
query16	7280	621	474	474
query17	1173	684	556	556
query18	1973	391	281	281
query19	191	176	182	176
query20	123	113	116	113
query21	211	127	108	108
query22	4047	4167	3948	3948
query23	33988	33115	32961	32961
query24	8400	2376	2355	2355
query25	552	448	386	386
query26	1224	270	152	152
query27	2751	501	331	331
query28	4324	2129	2115	2115
query29	765	566	433	433
query30	283	209	195	195
query31	946	834	740	740
query32	68	64	65	64
query33	564	362	328	328
query34	797	856	530	530
query35	806	826	731	731
query36	916	987	865	865
query37	108	102	76	76
query38	4140	4214	4012	4012
query39	1514	1501	1405	1405
query40	207	117	105	105
query41	66	58	59	58
query42	125	108	106	106
query43	504	513	480	480
query44	1295	819	837	819
query45	177	180	170	170
query46	852	1030	624	624
query47	1745	1812	1768	1768
query48	386	415	306	306
query49	749	515	402	402
query50	635	671	412	412
query51	4142	4145	4146	4145
query52	105	101	94	94
query53	218	250	183	183
query54	575	568	506	506
query55	83	79	85	79
query56	310	288	304	288
query57	1145	1135	1074	1074
query58	263	252	252	252
query59	2549	2610	2529	2529
query60	317	330	302	302
query61	126	121	145	121
query62	820	736	670	670
query63	221	187	188	187
query64	4343	1006	676	676
query65	4205	4199	4172	4172
query66	1151	428	320	320
query67	15686	15940	15297	15297
query68	7908	887	536	536
query69	475	323	276	276
query70	1183	1102	1096	1096
query71	496	352	305	305
query72	5697	2319	4991	2319
query73	759	766	361	361
query74	8939	9176	9003	9003
query75	3803	3203	2663	2663
query76	3618	1189	741	741
query77	808	367	291	291
query78	10120	10137	9374	9374
query79	2612	822	569	569
query80	627	508	434	434
query81	487	258	213	213
query82	479	134	96	96
query83	283	249	237	237
query84	293	113	85	85
query85	773	350	311	311
query86	384	305	280	280
query87	4371	4498	4341	4341
query88	3671	2279	2269	2269
query89	384	328	281	281
query90	1921	211	204	204
query91	140	138	112	112
query92	74	61	60	60
query93	2059	947	573	573
query94	660	404	307	307
query95	365	291	283	283
query96	495	570	283	283
query97	2749	2795	2677	2677
query98	242	218	212	212
query99	1448	1400	1290	1290
Total cold run time: 274815 ms
Total hot run time: 182991 ms

doris-robot avatar May 30 '25 05:05 doris-robot

ClickBench: Total hot run time: 29.12 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 483b87d86e9e1338d01d5624a45428e0b6b81ba0, data reload: false

query1	0.03	0.04	0.03
query2	0.12	0.10	0.10
query3	0.25	0.20	0.19
query4	1.60	0.20	0.11
query5	0.43	0.41	0.42
query6	1.16	0.66	0.68
query7	0.03	0.02	0.02
query8	0.04	0.04	0.04
query9	0.58	0.52	0.51
query10	0.56	0.58	0.56
query11	0.15	0.11	0.10
query12	0.14	0.11	0.12
query13	0.61	0.60	0.59
query14	0.79	0.80	0.81
query15	0.86	0.86	0.85
query16	0.38	0.39	0.37
query17	1.00	1.05	1.01
query18	0.23	0.21	0.22
query19	2.00	1.77	1.80
query20	0.02	0.01	0.01
query21	15.80	0.87	0.53
query22	0.84	1.21	0.72
query23	15.00	1.35	0.66
query24	7.10	0.95	0.84
query25	0.52	0.23	0.06
query26	0.48	0.16	0.15
query27	0.05	0.06	0.05
query28	9.68	0.88	0.43
query29	12.56	4.16	3.48
query30	0.26	0.09	0.06
query31	2.82	0.58	0.39
query32	3.22	0.54	0.46
query33	3.15	3.02	3.09
query34	15.65	5.08	4.52
query35	4.46	4.53	4.51
query36	0.66	0.50	0.48
query37	0.08	0.06	0.07
query38	0.06	0.05	0.03
query39	0.03	0.02	0.02
query40	0.16	0.14	0.13
query41	0.09	0.02	0.03
query42	0.03	0.03	0.02
query43	0.04	0.04	0.03
Total cold run time: 103.72 s
Total hot run time: 29.12 s

doris-robot avatar May 30 '25 05:05 doris-robot

run buildall

wyxxxcat avatar Jun 04 '25 02:06 wyxxxcat

TPC-H: Total hot run time: 33901 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit b6db0fc8cb9a0a3c9e4e4311db0bcf72cfa7f230, data reload: false

------ Round 1 ----------------------------------
q1	26011	5057	5024	5024
q2	1961	279	173	173
q3	10282	1246	685	685
q4	11142	1017	542	542
q5	7635	2361	2362	2361
q6	187	170	137	137
q7	936	762	610	610
q8	9516	1224	1054	1054
q9	7169	5310	5254	5254
q10	6980	2288	1877	1877
q11	491	285	272	272
q12	345	351	222	222
q13	19388	3712	3185	3185
q14	241	234	214	214
q15	1060	484	491	484
q16	475	437	392	392
q17	587	842	366	366
q18	7544	7132	7011	7011
q19	2702	1092	541	541
q20	319	324	219	219
q21	3548	2596	2308	2308
q22	1057	1021	970	970
Total cold run time: 119576 ms
Total hot run time: 33901 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5252	5066	5058	5058
q2	239	321	224	224
q3	2154	2578	2339	2339
q4	1332	1848	1438	1438
q5	4438	4370	4373	4370
q6	216	192	133	133
q7	2003	1940	1743	1743
q8	2593	2556	2491	2491
q9	7208	6939	7119	6939
q10	2970	3150	2755	2755
q11	606	506	481	481
q12	674	774	628	628
q13	3504	3840	3396	3396
q14	282	305	288	288
q15	545	510	502	502
q16	431	494	451	451
q17	1167	1503	1380	1380
q18	7754	7618	7574	7574
q19	760	729	779	729
q20	1933	1993	1921	1921
q21	4961	4506	4325	4325
q22	1121	1066	1024	1024
Total cold run time: 52143 ms
Total hot run time: 50189 ms

doris-robot avatar Jun 04 '25 03:06 doris-robot

TPC-DS: Total hot run time: 192570 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit b6db0fc8cb9a0a3c9e4e4311db0bcf72cfa7f230, data reload: false

query1	1435	1085	1032	1032
query2	6308	1863	1862	1862
query3	11027	4565	4533	4533
query4	51999	25398	23183	23183
query5	5031	598	461	461
query6	332	213	202	202
query7	4902	514	287	287
query8	295	228	228	228
query9	5358	2600	2596	2596
query10	422	315	286	286
query11	15451	15108	14724	14724
query12	163	108	103	103
query13	1015	516	401	401
query14	10141	6381	6464	6381
query15	207	209	174	174
query16	7132	632	517	517
query17	1088	762	600	600
query18	1541	426	338	338
query19	199	190	170	170
query20	130	142	130	130
query21	215	128	114	114
query22	4240	4336	4233	4233
query23	34239	33645	33487	33487
query24	6717	2416	2426	2416
query25	470	466	399	399
query26	712	281	161	161
query27	2255	508	350	350
query28	3250	2184	2116	2116
query29	608	562	433	433
query30	279	216	194	194
query31	831	886	783	783
query32	78	65	71	65
query33	455	393	325	325
query34	804	906	547	547
query35	796	841	754	754
query36	964	999	919	919
query37	117	99	79	79
query38	4286	4265	4190	4190
query39	1581	1479	1504	1479
query40	223	118	110	110
query41	63	59	55	55
query42	136	114	112	112
query43	498	506	491	491
query44	1302	832	845	832
query45	194	176	169	169
query46	847	1029	655	655
query47	1836	1831	1776	1776
query48	393	431	321	321
query49	651	503	418	418
query50	694	699	417	417
query51	4380	4273	4280	4273
query52	116	113	96	96
query53	232	253	190	190
query54	574	580	523	523
query55	91	93	90	90
query56	335	346	294	294
query57	1164	1200	1122	1122
query58	271	269	270	269
query59	2664	2802	2697	2697
query60	350	358	331	331
query61	153	145	162	145
query62	758	733	661	661
query63	227	196	194	194
query64	1846	1038	709	709
query65	4235	4161	4158	4158
query66	766	410	302	302
query67	16085	15784	15481	15481
query68	7055	829	559	559
query69	531	306	266	266
query70	1160	1021	1107	1021
query71	494	330	295	295
query72	5519	4819	4872	4819
query73	1461	623	353	353
query74	9253	8935	8749	8749
query75	4051	3195	2709	2709
query76	4269	1188	770	770
query77	744	388	300	300
query78	10140	10057	9408	9408
query79	4535	784	566	566
query80	640	562	467	467
query81	482	253	221	221
query82	540	126	94	94
query83	300	257	231	231
query84	297	114	86	86
query85	795	375	318	318
query86	372	303	296	296
query87	4388	4442	4321	4321
query88	3539	2285	2268	2268
query89	425	316	284	284
query90	1841	212	211	211
query91	152	161	114	114
query92	77	64	59	59
query93	3154	929	577	577
query94	660	404	304	304
query95	376	298	280	280
query96	490	584	282	282
query97	2711	2777	2677	2677
query98	229	211	211	211
query99	1417	1426	1311	1311
Total cold run time: 300254 ms
Total hot run time: 192570 ms

doris-robot avatar Jun 04 '25 03:06 doris-robot

ClickBench: Total hot run time: 29.29 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit b6db0fc8cb9a0a3c9e4e4311db0bcf72cfa7f230, data reload: false

query1	0.04	0.04	0.04
query2	0.13	0.11	0.12
query3	0.25	0.19	0.19
query4	1.59	0.19	0.19
query5	0.44	0.44	0.43
query6	1.21	0.66	0.67
query7	0.02	0.01	0.01
query8	0.04	0.04	0.03
query9	0.60	0.51	0.51
query10	0.58	0.57	0.56
query11	0.15	0.11	0.11
query12	0.14	0.11	0.11
query13	0.62	0.59	0.60
query14	0.78	0.81	0.81
query15	0.88	0.88	0.87
query16	0.38	0.38	0.37
query17	1.09	1.03	1.03
query18	0.23	0.21	0.20
query19	1.89	1.85	1.78
query20	0.02	0.01	0.01
query21	15.40	0.89	0.56
query22	0.78	1.02	0.68
query23	15.02	1.42	0.59
query24	7.02	1.34	0.99
query25	0.51	0.12	0.06
query26	0.62	0.16	0.14
query27	0.05	0.05	0.05
query28	9.54	0.93	0.45
query29	12.55	4.04	3.40
query30	0.25	0.09	0.06
query31	2.82	0.59	0.40
query32	3.23	0.55	0.47
query33	2.99	3.01	3.09
query34	15.85	5.05	4.53
query35	4.50	4.50	4.49
query36	0.68	0.50	0.48
query37	0.09	0.07	0.06
query38	0.05	0.05	0.04
query39	0.03	0.02	0.02
query40	0.17	0.13	0.13
query41	0.08	0.03	0.02
query42	0.04	0.02	0.03
query43	0.04	0.03	0.03
Total cold run time: 103.39 s
Total hot run time: 29.29 s

doris-robot avatar Jun 04 '25 03:06 doris-robot

run feut

wyxxxcat avatar Jun 04 '25 07:06 wyxxxcat

run buildall

wyxxxcat avatar Jul 01 '25 03:07 wyxxxcat

FE UT Coverage Report

Increment line coverage 20.00% (1/5) :tada: Increment coverage report Complete coverage report

hello-stephen avatar Jul 01 '25 04:07 hello-stephen

TPC-H: Total hot run time: 34496 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit bb1ab838ff2690ba2096e77615ca34647a1552d8, data reload: false

------ Round 1 ----------------------------------
q1	17611	5245	5085	5085
q2	1951	281	193	193
q3	10287	1295	763	763
q4	10218	1030	536	536
q5	7527	2455	2372	2372
q6	179	159	131	131
q7	894	753	608	608
q8	9323	1309	1229	1229
q9	6790	5111	5140	5111
q10	6898	2398	1989	1989
q11	504	293	288	288
q12	349	357	224	224
q13	17770	3756	3162	3162
q14	244	228	216	216
q15	554	485	487	485
q16	424	425	383	383
q17	604	872	362	362
q18	7840	7270	7150	7150
q19	1518	972	553	553
q20	330	353	226	226
q21	4022	3299	2460	2460
q22	1035	1037	970	970
Total cold run time: 106872 ms
Total hot run time: 34496 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5187	5187	5169	5169
q2	250	323	220	220
q3	2253	2680	2327	2327
q4	1406	1817	1365	1365
q5	4351	4449	4529	4449
q6	221	165	125	125
q7	2047	1949	1773	1773
q8	2670	2667	2645	2645
q9	7330	7396	7363	7363
q10	3115	3289	2866	2866
q11	588	541	498	498
q12	717	772	659	659
q13	3325	3749	3121	3121
q14	275	295	269	269
q15	522	467	466	466
q16	419	471	433	433
q17	1115	1437	1331	1331
q18	7400	7196	7132	7132
q19	780	779	871	779
q20	1934	2007	1850	1850
q21	4810	4362	4256	4256
q22	1084	1040	1018	1018
Total cold run time: 51799 ms
Total hot run time: 50114 ms

doris-robot avatar Jul 01 '25 04:07 doris-robot

TPC-DS: Total hot run time: 186862 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit bb1ab838ff2690ba2096e77615ca34647a1552d8, data reload: false

query1	1020	390	400	390
query2	6528	1764	1754	1754
query3	6749	215	216	215
query4	26477	24016	23529	23529
query5	4352	595	449	449
query6	301	229	205	205
query7	4627	509	300	300
query8	293	231	224	224
query9	8634	2722	2722	2722
query10	474	324	287	287
query11	15756	15079	14792	14792
query12	167	111	104	104
query13	1654	570	409	409
query14	9498	5741	5886	5741
query15	200	200	170	170
query16	7635	609	484	484
query17	1208	727	599	599
query18	2044	416	315	315
query19	201	199	165	165
query20	123	116	114	114
query21	212	131	108	108
query22	4282	4202	4261	4202
query23	34074	33259	33272	33259
query24	8478	2398	2395	2395
query25	556	478	403	403
query26	1053	264	156	156
query27	2713	504	354	354
query28	4282	2180	2169	2169
query29	658	588	465	465
query30	291	221	192	192
query31	917	839	747	747
query32	67	67	58	58
query33	540	367	322	322
query34	813	877	531	531
query35	811	816	734	734
query36	968	984	899	899
query37	107	96	72	72
query38	4179	4194	4213	4194
query39	1486	1443	1407	1407
query40	211	117	110	110
query41	55	55	52	52
query42	137	109	108	108
query43	498	507	489	489
query44	1377	842	838	838
query45	183	171	173	171
query46	871	1050	651	651
query47	1767	1824	1715	1715
query48	378	428	315	315
query49	707	470	387	387
query50	652	698	453	453
query51	4169	4247	4145	4145
query52	114	117	107	107
query53	224	254	187	187
query54	593	578	514	514
query55	81	84	83	83
query56	314	300	288	288
query57	1210	1193	1129	1129
query58	270	256	278	256
query59	2643	2758	2616	2616
query60	327	316	318	316
query61	126	124	122	122
query62	789	749	649	649
query63	223	198	196	196
query64	3673	1021	715	715
query65	4245	4206	4205	4205
query66	945	392	314	314
query67	16018	15639	15759	15639
query68	8489	911	534	534
query69	478	303	282	282
query70	1191	1141	1112	1112
query71	451	313	313	313
query72	5666	4812	4897	4812
query73	728	653	354	354
query74	8906	9119	8736	8736
query75	3934	3262	2733	2733
query76	3610	1185	755	755
query77	784	386	295	295
query78	10199	10275	9319	9319
query79	1902	894	585	585
query80	607	510	441	441
query81	481	257	231	231
query82	439	132	97	97
query83	261	261	233	233
query84	239	129	98	98
query85	787	360	318	318
query86	375	307	298	298
query87	4413	4404	4309	4309
query88	3570	2386	2341	2341
query89	390	318	291	291
query90	1932	213	231	213
query91	147	144	118	118
query92	79	64	53	53
query93	1499	978	596	596
query94	664	423	303	303
query95	379	290	292	290
query96	509	572	288	288
query97	2681	2786	2675	2675
query98	245	209	204	204
query99	1698	1379	1230	1230
Total cold run time: 274961 ms
Total hot run time: 186862 ms

doris-robot avatar Jul 01 '25 04:07 doris-robot

ClickBench: Total hot run time: 29.28 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit bb1ab838ff2690ba2096e77615ca34647a1552d8, data reload: false

query1	0.05	0.04	0.04
query2	0.08	0.04	0.04
query3	0.24	0.07	0.08
query4	1.62	0.11	0.11
query5	0.44	0.44	0.41
query6	1.17	0.67	0.67
query7	0.03	0.02	0.02
query8	0.05	0.04	0.04
query9	0.60	0.52	0.52
query10	0.59	0.57	0.58
query11	0.17	0.12	0.11
query12	0.15	0.12	0.12
query13	0.63	0.60	0.60
query14	0.81	0.83	0.81
query15	0.91	0.88	0.87
query16	0.39	0.39	0.39
query17	1.07	1.06	1.11
query18	0.23	0.22	0.22
query19	1.98	1.87	1.88
query20	0.01	0.01	0.01
query21	15.38	0.92	0.54
query22	0.74	1.21	0.68
query23	14.92	1.41	0.62
query24	7.75	0.93	0.31
query25	0.28	0.08	0.07
query26	0.77	0.17	0.14
query27	0.06	0.05	0.05
query28	8.48	0.94	0.47
query29	12.61	4.05	3.32
query30	0.25	0.09	0.07
query31	2.83	0.58	0.39
query32	3.23	0.58	0.47
query33	3.06	3.06	3.13
query34	16.03	5.43	4.81
query35	4.86	4.89	4.87
query36	0.69	0.51	0.49
query37	0.10	0.07	0.07
query38	0.05	0.04	0.04
query39	0.04	0.03	0.03
query40	0.17	0.14	0.14
query41	0.08	0.03	0.03
query42	0.04	0.03	0.03
query43	0.04	0.04	0.03
Total cold run time: 103.68 s
Total hot run time: 29.28 s

doris-robot avatar Jul 01 '25 04:07 doris-robot

run buildall

wyxxxcat avatar Jul 02 '25 06:07 wyxxxcat

TPC-H: Total hot run time: 33935 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 5f84ddc40042805057c35a8f606e1941ad4d4a23, data reload: false

------ Round 1 ----------------------------------
q1	17589	5156	5034	5034
q2	1925	319	193	193
q3	10271	1305	718	718
q4	10219	1006	518	518
q5	7520	2401	2317	2317
q6	180	158	127	127
q7	894	734	627	627
q8	9327	1291	1063	1063
q9	6908	5121	5121	5121
q10	6883	2369	1977	1977
q11	485	288	279	279
q12	345	350	221	221
q13	17762	3658	3141	3141
q14	229	239	225	225
q15	526	483	477	477
q16	418	426	379	379
q17	607	851	364	364
q18	7373	7109	7105	7105
q19	1064	924	537	537
q20	334	367	217	217
q21	3834	2672	2348	2348
q22	1006	1004	947	947
Total cold run time: 105699 ms
Total hot run time: 33935 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5107	5067	5122	5067
q2	244	325	218	218
q3	2191	2665	2264	2264
q4	1355	1787	1321	1321
q5	4218	4342	4603	4342
q6	216	161	121	121
q7	1978	1927	1850	1850
q8	2608	2655	2625	2625
q9	7450	7329	7177	7177
q10	3072	3368	2857	2857
q11	563	545	499	499
q12	718	755	648	648
q13	3574	4010	3524	3524
q14	313	294	277	277
q15	522	472	470	470
q16	453	485	445	445
q17	1157	1618	1377	1377
q18	7917	7811	7724	7724
q19	785	832	988	832
q20	2026	2281	1896	1896
q21	4900	4710	4460	4460
q22	1129	1072	1090	1072
Total cold run time: 52496 ms
Total hot run time: 51066 ms

doris-robot avatar Jul 02 '25 06:07 doris-robot

TPC-DS: Total hot run time: 186827 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 5f84ddc40042805057c35a8f606e1941ad4d4a23, data reload: false

query1	1031	393	420	393
query2	6550	1738	1750	1738
query3	6741	212	211	211
query4	26286	23552	23475	23475
query5	4324	582	455	455
query6	302	226	195	195
query7	4620	523	292	292
query8	270	221	211	211
query9	8556	2625	2653	2625
query10	472	322	285	285
query11	15734	15057	14758	14758
query12	165	108	108	108
query13	1654	559	406	406
query14	9534	5797	5848	5797
query15	207	193	169	169
query16	7644	644	484	484
query17	1373	721	599	599
query18	2032	406	299	299
query19	196	186	161	161
query20	118	127	117	117
query21	218	134	111	111
query22	4114	4407	4549	4407
query23	34818	33813	33796	33796
query24	8435	2368	2385	2368
query25	529	452	389	389
query26	1229	261	142	142
query27	2736	504	359	359
query28	4308	2147	2116	2116
query29	712	565	442	442
query30	281	221	187	187
query31	930	833	739	739
query32	68	63	57	57
query33	548	386	298	298
query34	790	844	520	520
query35	784	796	741	741
query36	951	969	889	889
query37	105	94	69	69
query38	4170	4091	4012	4012
query39	1454	1388	1418	1388
query40	207	113	108	108
query41	55	56	49	49
query42	121	109	107	107
query43	507	516	475	475
query44	1362	823	818	818
query45	177	172	160	160
query46	865	1019	634	634
query47	1748	1764	1713	1713
query48	394	417	309	309
query49	730	482	410	410
query50	633	688	406	406
query51	4167	4173	4186	4173
query52	108	109	93	93
query53	222	254	181	181
query54	589	577	506	506
query55	83	79	80	79
query56	302	279	268	268
query57	1173	1182	1112	1112
query58	257	249	245	245
query59	2699	2732	2745	2732
query60	326	316	300	300
query61	122	123	119	119
query62	809	727	681	681
query63	226	181	186	181
query64	4292	990	661	661
query65	4243	4271	4190	4190
query66	1043	394	304	304
query67	15933	15620	15513	15513
query68	8212	901	521	521
query69	472	306	278	278
query70	1204	1129	1115	1115
query71	466	330	303	303
query72	5722	4822	4882	4822
query73	701	654	345	345
query74	8900	9060	8938	8938
query75	3903	3189	2671	2671
query76	3717	1147	742	742
query77	774	371	295	295
query78	10215	10098	9385	9385
query79	2578	811	587	587
query80	596	498	458	458
query81	485	250	221	221
query82	454	126	96	96
query83	268	266	242	242
query84	290	110	84	84
query85	789	356	309	309
query86	379	300	257	257
query87	4472	4467	4380	4380
query88	3647	2262	2265	2262
query89	375	317	278	278
query90	1864	204	204	204
query91	134	135	110	110
query92	73	59	51	51
query93	1946	943	579	579
query94	675	399	311	311
query95	371	289	278	278
query96	482	569	276	276
query97	2744	2741	2648	2648
query98	226	209	204	204
query99	1473	1353	1242	1242
Total cold run time: 276989 ms
Total hot run time: 186827 ms

doris-robot avatar Jul 02 '25 06:07 doris-robot