doris icon indicating copy to clipboard operation
doris copied to clipboard

[refactor](nereids)refactor hint

Open starocean999 opened this issue 6 months ago • 10 comments

What problem does this PR solve?

Issue Number: close #xxx

Related PR: #xxx

Problem Summary:

Release note

None

Check List (For Author)

  • Test

    • [ ] Regression test
    • [ ] Unit Test
    • [ ] Manual test (add detailed scripts or steps below)
    • [ ] No need to test or manual test. Explain why:
      • [ ] This is a refactor/code format and no logic has been changed.
      • [ ] Previous test can cover this change.
      • [ ] No code files have been changed.
      • [ ] Other reason
  • Behavior changed:

    • [ ] No.
    • [ ] Yes.
  • Does this need documentation?

    • [ ] No.
    • [ ] Yes.

Check List (For Reviewer who merge this PR)

  • [ ] Confirm the release note
  • [ ] Confirm test cases
  • [ ] Confirm document
  • [ ] Add branch pick label

starocean999 avatar May 20 '25 02:05 starocean999

Thank you for your contribution to Apache Doris. Don't know what should be done next? See How to process your PR.

Please clearly describe your PR:

  1. What problem was fixed (it's best to include specific error reporting information). How it was fixed.
  2. Which behaviors were modified. What was the previous behavior, what is it now, why was it modified, and what possible impacts might there be.
  3. What features were added. Why was this function added?
  4. Which code was refactored and why was this part of the code refactored?
  5. Which functions were optimized and what is the difference before and after the optimization?

hello-stephen avatar May 20 '25 02:05 hello-stephen

run buildall

starocean999 avatar Jun 18 '25 09:06 starocean999

TPC-H: Total hot run time: 33775 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 45584e932818c99abed5fa39c0eec831588e55b8, data reload: false

------ Round 1 ----------------------------------
q1	17621	5242	4971	4971
q2	1926	301	180	180
q3	10295	1373	703	703
q4	10273	1004	537	537
q5	8480	2378	2357	2357
q6	180	159	130	130
q7	939	746	625	625
q8	9320	1316	1015	1015
q9	6806	5120	5087	5087
q10	6867	2389	1951	1951
q11	493	284	280	280
q12	343	357	212	212
q13	17760	3665	3126	3126
q14	227	227	214	214
q15	563	471	472	471
q16	443	436	364	364
q17	584	854	360	360
q18	7580	7252	7116	7116
q19	1328	953	534	534
q20	327	328	219	219
q21	3781	3161	2349	2349
q22	1008	1001	974	974
Total cold run time: 107144 ms
Total hot run time: 33775 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5069	5026	5027	5026
q2	243	327	224	224
q3	2162	2663	2253	2253
q4	1381	1753	1328	1328
q5	4190	4061	4449	4061
q6	212	178	129	129
q7	2004	1909	1740	1740
q8	2586	2590	2569	2569
q9	7183	7125	7210	7125
q10	3087	3281	2879	2879
q11	587	513	485	485
q12	668	751	642	642
q13	3552	3892	3271	3271
q14	286	305	287	287
q15	510	463	471	463
q16	427	479	440	440
q17	1139	1495	1340	1340
q18	7746	7626	7423	7423
q19	777	801	884	801
q20	1954	2034	1897	1897
q21	4868	4391	4276	4276
q22	1042	1013	971	971
Total cold run time: 51673 ms
Total hot run time: 49630 ms

doris-robot avatar Jun 18 '25 10:06 doris-robot

TPC-DS: Total hot run time: 189834 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 45584e932818c99abed5fa39c0eec831588e55b8, data reload: false

query1	1006	402	405	402
query2	6527	1819	1810	1810
query3	6741	226	213	213
query4	27025	23260	23395	23260
query5	4346	626	445	445
query6	316	207	198	198
query7	4617	482	278	278
query8	253	217	209	209
query9	8627	2616	2622	2616
query10	481	326	280	280
query11	15795	15182	14844	14844
query12	156	109	106	106
query13	1660	526	406	406
query14	8681	6105	6113	6105
query15	203	202	174	174
query16	7141	640	474	474
query17	1052	703	575	575
query18	1977	409	309	309
query19	199	185	163	163
query20	128	125	117	117
query21	213	128	109	109
query22	4034	4116	4065	4065
query23	33914	33075	33079	33075
query24	8459	2409	2372	2372
query25	606	466	396	396
query26	1235	274	148	148
query27	2760	503	339	339
query28	4292	2136	2110	2110
query29	753	536	418	418
query30	280	216	188	188
query31	891	816	759	759
query32	79	66	64	64
query33	560	406	305	305
query34	794	846	537	537
query35	763	800	731	731
query36	850	888	793	793
query37	111	100	75	75
query38	4054	4204	4047	4047
query39	1479	1424	1406	1406
query40	229	121	108	108
query41	62	61	62	61
query42	122	109	105	105
query43	503	497	473	473
query44	1324	813	812	812
query45	176	180	170	170
query46	825	1028	631	631
query47	1778	1780	1732	1732
query48	373	421	306	306
query49	762	472	397	397
query50	628	677	400	400
query51	10090	10194	10172	10172
query52	110	108	102	102
query53	214	249	175	175
query54	596	572	510	510
query55	85	88	80	80
query56	311	312	293	293
query57	1229	1220	1176	1176
query58	264	270	264	264
query59	2520	2705	2498	2498
query60	335	325	295	295
query61	128	127	126	126
query62	794	716	680	680
query63	224	180	183	180
query64	4337	1001	670	670
query65	4258	4192	4178	4178
query66	1154	403	368	368
query67	15052	14832	14546	14546
query68	9588	785	529	529
query69	490	304	264	264
query70	1008	709	678	678
query71	449	343	299	299
query72	5871	4766	4590	4590
query73	889	652	362	362
query74	9265	9123	8745	8745
query75	4435	3230	2705	2705
query76	5419	1199	747	747
query77	986	412	279	279
query78	9968	10183	9225	9225
query79	2367	835	595	595
query80	636	514	439	439
query81	465	261	221	221
query82	437	129	101	101
query83	281	251	240	240
query84	295	116	94	94
query85	784	352	309	309
query86	318	261	243	243
query87	4522	4402	4277	4277
query88	3047	2289	2299	2289
query89	423	311	280	280
query90	1914	216	215	215
query91	137	141	110	110
query92	79	62	63	62
query93	1794	947	582	582
query94	686	404	289	289
query95	383	293	282	282
query96	500	559	280	280
query97	2694	2801	2627	2627
query98	227	204	204	204
query99	1435	1378	1243	1243
Total cold run time: 283333 ms
Total hot run time: 189834 ms

doris-robot avatar Jun 18 '25 10:06 doris-robot

ClickBench: Total hot run time: 29.65 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 45584e932818c99abed5fa39c0eec831588e55b8, data reload: false

query1	0.03	0.04	0.02
query2	0.07	0.03	0.04
query3	0.24	0.07	0.07
query4	1.61	0.09	0.10
query5	0.42	0.42	0.40
query6	1.18	0.65	0.66
query7	0.02	0.02	0.02
query8	0.04	0.03	0.03
query9	0.58	0.52	0.51
query10	0.58	0.58	0.57
query11	0.16	0.11	0.11
query12	0.14	0.12	0.11
query13	0.62	0.60	0.61
query14	0.80	0.82	0.81
query15	0.87	0.86	0.89
query16	0.40	0.38	0.38
query17	1.05	1.07	1.07
query18	0.23	0.21	0.21
query19	1.92	1.79	1.82
query20	0.01	0.01	0.01
query21	15.42	0.87	0.56
query22	0.76	1.23	0.69
query23	14.86	1.40	0.66
query24	7.58	1.49	0.78
query25	0.45	0.22	0.20
query26	0.73	0.16	0.12
query27	0.06	0.05	0.05
query28	9.16	0.85	0.45
query29	12.59	4.02	3.33
query30	0.26	0.09	0.06
query31	2.82	0.60	0.41
query32	3.23	0.55	0.46
query33	3.12	3.09	3.09
query34	16.00	5.40	4.81
query35	4.81	4.84	4.79
query36	0.67	0.50	0.50
query37	0.08	0.07	0.07
query38	0.05	0.04	0.04
query39	0.03	0.03	0.03
query40	0.18	0.15	0.14
query41	0.08	0.02	0.03
query42	0.04	0.02	0.02
query43	0.04	0.03	0.04
Total cold run time: 103.99 s
Total hot run time: 29.65 s

doris-robot avatar Jun 18 '25 10:06 doris-robot

run buildall

starocean999 avatar Jun 18 '25 15:06 starocean999

TPC-H: Total hot run time: 33954 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit ea45da3459d5fe593591a97c4362434ea38fd723, data reload: false

------ Round 1 ----------------------------------
q1	17589	5134	4988	4988
q2	1940	288	188	188
q3	10305	1361	720	720
q4	10214	1010	534	534
q5	7541	2304	2390	2304
q6	183	163	136	136
q7	915	728	608	608
q8	9319	1318	1157	1157
q9	6753	5077	5057	5057
q10	6925	2405	1953	1953
q11	486	306	290	290
q12	344	359	220	220
q13	17778	3679	3083	3083
q14	220	221	212	212
q15	564	479	481	479
q16	435	429	378	378
q17	597	855	390	390
q18	7454	7203	7174	7174
q19	2092	943	558	558
q20	337	350	227	227
q21	3767	2546	2345	2345
q22	994	984	953	953
Total cold run time: 106752 ms
Total hot run time: 33954 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5177	5084	5036	5036
q2	251	318	231	231
q3	2123	2659	2289	2289
q4	1390	1732	1324	1324
q5	4203	4111	4359	4111
q6	213	172	137	137
q7	2003	1916	1766	1766
q8	2545	2554	2457	2457
q9	7148	7034	7164	7034
q10	3059	3252	2846	2846
q11	564	517	511	511
q12	657	757	658	658
q13	3591	3909	3327	3327
q14	298	293	275	275
q15	522	497	481	481
q16	428	490	432	432
q17	1132	1615	1305	1305
q18	7564	7226	7118	7118
q19	769	858	1083	858
q20	1909	1961	1791	1791
q21	4807	4397	4262	4262
q22	1065	1029	987	987
Total cold run time: 51418 ms
Total hot run time: 49236 ms

doris-robot avatar Jun 18 '25 15:06 doris-robot

TPC-DS: Total hot run time: 186404 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit ea45da3459d5fe593591a97c4362434ea38fd723, data reload: false

query1	979	408	403	403
query2	6524	1858	1816	1816
query3	6745	219	228	219
query4	26512	23934	23464	23464
query5	4357	638	465	465
query6	304	210	198	198
query7	4633	498	300	300
query8	271	246	219	219
query9	8643	2621	2615	2615
query10	483	329	264	264
query11	15406	15216	15329	15216
query12	172	109	107	107
query13	1653	519	410	410
query14	10060	6275	6322	6275
query15	203	194	164	164
query16	7644	591	440	440
query17	1168	728	578	578
query18	2018	403	302	302
query19	189	181	159	159
query20	119	113	114	113
query21	210	122	116	116
query22	4006	4083	4040	4040
query23	34489	33149	33425	33149
query24	8357	2386	2426	2386
query25	525	462	400	400
query26	937	270	161	161
query27	2730	507	351	351
query28	4296	2113	2085	2085
query29	673	572	448	448
query30	293	223	193	193
query31	950	826	757	757
query32	71	62	64	62
query33	548	354	319	319
query34	846	840	543	543
query35	786	802	731	731
query36	934	976	884	884
query37	110	100	85	85
query38	4140	4172	4033	4033
query39	1459	1417	1420	1417
query40	216	129	111	111
query41	63	61	65	61
query42	134	108	107	107
query43	502	503	467	467
query44	1365	880	823	823
query45	180	170	165	165
query46	826	1015	648	648
query47	1779	1790	1727	1727
query48	389	436	314	314
query49	711	499	408	408
query50	648	705	403	403
query51	4124	4172	4118	4118
query52	115	113	96	96
query53	224	263	184	184
query54	578	567	495	495
query55	88	84	87	84
query56	332	316	297	297
query57	1177	1205	1118	1118
query58	293	257	257	257
query59	2616	2689	2520	2520
query60	337	330	300	300
query61	130	122	129	122
query62	810	717	672	672
query63	228	190	214	190
query64	3560	1008	669	669
query65	4275	4196	4183	4183
query66	876	413	307	307
query67	15644	15511	15294	15294
query68	7818	885	533	533
query69	478	323	276	276
query70	1145	1143	1055	1055
query71	407	319	310	310
query72	5234	4703	4773	4703
query73	689	632	352	352
query74	9266	9226	8829	8829
query75	3243	3208	2694	2694
query76	3156	1200	769	769
query77	576	396	304	304
query78	9916	9985	9282	9282
query79	1906	839	581	581
query80	598	528	456	456
query81	476	262	226	226
query82	207	130	103	103
query83	249	262	252	252
query84	250	120	92	92
query85	739	396	316	316
query86	356	280	264	264
query87	4398	4464	4313	4313
query88	3803	2305	2304	2304
query89	376	333	294	294
query90	1980	221	220	220
query91	145	141	114	114
query92	72	59	61	59
query93	1674	965	589	589
query94	697	407	313	313
query95	376	288	283	283
query96	494	569	283	283
query97	2709	2760	2707	2707
query98	238	214	201	201
query99	1315	1405	1300	1300
Total cold run time: 271649 ms
Total hot run time: 186404 ms

doris-robot avatar Jun 18 '25 16:06 doris-robot

ClickBench: Total hot run time: 29.57 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit ea45da3459d5fe593591a97c4362434ea38fd723, data reload: false

query1	0.03	0.03	0.03
query2	0.07	0.04	0.03
query3	0.24	0.06	0.07
query4	1.60	0.11	0.11
query5	0.43	0.43	0.42
query6	1.17	0.67	0.66
query7	0.02	0.01	0.02
query8	0.05	0.04	0.04
query9	0.58	0.53	0.52
query10	0.57	0.58	0.56
query11	0.15	0.11	0.11
query12	0.15	0.11	0.12
query13	0.64	0.60	0.60
query14	0.82	0.81	0.83
query15	0.90	0.86	0.89
query16	0.38	0.39	0.39
query17	1.07	1.04	1.01
query18	0.22	0.21	0.20
query19	1.96	1.81	1.83
query20	0.02	0.01	0.01
query21	15.40	0.90	0.53
query22	0.76	1.11	0.96
query23	14.69	1.38	0.64
query24	7.22	1.38	0.51
query25	0.49	0.18	0.23
query26	0.60	0.16	0.15
query27	0.07	0.06	0.05
query28	9.38	0.93	0.45
query29	12.58	3.97	3.29
query30	0.26	0.09	0.07
query31	2.83	0.58	0.39
query32	3.23	0.57	0.49
query33	3.11	3.07	3.09
query34	16.21	5.39	4.79
query35	4.81	4.85	4.82
query36	0.71	0.50	0.50
query37	0.09	0.06	0.06
query38	0.06	0.04	0.04
query39	0.04	0.02	0.02
query40	0.18	0.14	0.14
query41	0.09	0.03	0.02
query42	0.03	0.02	0.02
query43	0.04	0.04	0.03
Total cold run time: 103.95 s
Total hot run time: 29.57 s

doris-robot avatar Jun 18 '25 16:06 doris-robot

FE UT Coverage Report

Increment line coverage 58.70% (945/1610) :tada: Increment coverage report Complete coverage report

hello-stephen avatar Jun 18 '25 16:06 hello-stephen

run buildall

starocean999 avatar Jun 19 '25 14:06 starocean999

TPC-H: Total hot run time: 33985 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 008a811ec1a990a1391539b5af4140822dbc59d8, data reload: false

------ Round 1 ----------------------------------
q1	17582	5153	5067	5067
q2	1967	330	207	207
q3	10407	1334	774	774
q4	10266	1028	521	521
q5	7990	2446	2300	2300
q6	189	166	131	131
q7	906	724	614	614
q8	9318	1292	1117	1117
q9	6789	5170	5131	5131
q10	6891	2396	1949	1949
q11	485	290	275	275
q12	340	347	226	226
q13	17765	3716	3125	3125
q14	230	236	221	221
q15	583	472	476	472
q16	433	445	369	369
q17	594	895	353	353
q18	7921	7050	7134	7050
q19	1364	952	538	538
q20	337	333	230	230
q21	3863	3182	2349	2349
q22	1021	1018	966	966
Total cold run time: 107241 ms
Total hot run time: 33985 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5152	5124	5392	5124
q2	251	321	235	235
q3	2175	2609	2273	2273
q4	1337	1805	1373	1373
q5	4235	4135	4410	4135
q6	213	173	136	136
q7	1991	1935	1774	1774
q8	2584	2481	2532	2481
q9	7255	7105	7276	7105
q10	3040	3271	2845	2845
q11	584	531	496	496
q12	673	740	616	616
q13	3517	3922	3279	3279
q14	280	303	274	274
q15	516	482	470	470
q16	444	489	429	429
q17	1168	1595	1336	1336
q18	7520	7257	6993	6993
q19	766	743	754	743
q20	1907	2002	1866	1866
q21	4814	4295	4369	4295
q22	1056	1034	967	967
Total cold run time: 51478 ms
Total hot run time: 49245 ms

doris-robot avatar Jun 19 '25 14:06 doris-robot

TPC-DS: Total hot run time: 186037 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 008a811ec1a990a1391539b5af4140822dbc59d8, data reload: false

query1	992	397	403	397
query2	6541	1754	1810	1754
query3	6758	219	227	219
query4	26414	23369	23490	23369
query5	4316	618	465	465
query6	319	217	203	203
query7	4636	501	298	298
query8	279	224	220	220
query9	8637	2615	2625	2615
query10	508	336	282	282
query11	15727	15060	14872	14872
query12	182	111	104	104
query13	1670	532	408	408
query14	9794	6191	6114	6114
query15	206	195	173	173
query16	7660	639	452	452
query17	1204	724	585	585
query18	2050	417	319	319
query19	204	189	166	166
query20	120	116	126	116
query21	224	135	110	110
query22	4058	4208	4029	4029
query23	34217	33158	33215	33158
query24	8476	2376	2353	2353
query25	527	455	405	405
query26	1217	270	153	153
query27	2752	505	345	345
query28	4291	2119	2104	2104
query29	746	540	431	431
query30	283	231	196	196
query31	940	836	763	763
query32	72	63	66	63
query33	568	379	305	305
query34	793	846	550	550
query35	807	832	726	726
query36	972	967	883	883
query37	109	101	76	76
query38	4124	4094	4158	4094
query39	1466	1408	1424	1408
query40	212	115	108	108
query41	63	61	57	57
query42	124	113	108	108
query43	496	499	462	462
query44	1299	824	815	815
query45	180	174	168	168
query46	837	1032	626	626
query47	1786	1800	1688	1688
query48	384	419	304	304
query49	752	494	398	398
query50	625	667	401	401
query51	4139	4185	4131	4131
query52	114	110	97	97
query53	219	245	186	186
query54	566	590	498	498
query55	86	86	87	86
query56	302	297	296	296
query57	1186	1220	1144	1144
query58	262	261	253	253
query59	2477	2568	2574	2568
query60	332	324	317	317
query61	128	127	126	126
query62	828	748	669	669
query63	224	186	187	186
query64	4311	999	660	660
query65	4251	4144	4195	4144
query66	1051	412	321	321
query67	15951	15561	15466	15466
query68	8102	882	519	519
query69	468	304	270	270
query70	1176	1125	1084	1084
query71	499	312	302	302
query72	5735	4705	4725	4705
query73	703	611	350	350
query74	9311	9192	9035	9035
query75	3876	3182	2714	2714
query76	3717	1187	770	770
query77	791	376	290	290
query78	10065	10051	9355	9355
query79	3893	811	558	558
query80	656	518	455	455
query81	485	276	221	221
query82	450	132	98	98
query83	342	255	226	226
query84	301	106	90	90
query85	787	350	319	319
query86	337	302	309	302
query87	4481	4367	4317	4317
query88	3416	2285	2300	2285
query89	447	310	294	294
query90	1980	212	198	198
query91	143	143	115	115
query92	77	62	62	62
query93	2532	924	575	575
query94	676	414	273	273
query95	371	293	283	283
query96	496	565	274	274
query97	2728	2750	2660	2660
query98	239	234	203	203
query99	1456	1385	1269	1269
Total cold run time: 278780 ms
Total hot run time: 186037 ms

doris-robot avatar Jun 19 '25 14:06 doris-robot

ClickBench: Total hot run time: 29.7 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 008a811ec1a990a1391539b5af4140822dbc59d8, data reload: false

query1	0.04	0.03	0.04
query2	0.08	0.03	0.04
query3	0.24	0.07	0.07
query4	1.60	0.10	0.11
query5	0.46	0.45	0.40
query6	1.19	0.66	0.68
query7	0.02	0.02	0.02
query8	0.05	0.04	0.04
query9	0.58	0.52	0.52
query10	0.57	0.58	0.57
query11	0.16	0.11	0.11
query12	0.16	0.11	0.11
query13	0.63	0.61	0.60
query14	0.83	0.82	0.87
query15	0.91	0.88	0.88
query16	0.39	0.39	0.39
query17	1.07	1.09	1.05
query18	0.22	0.21	0.22
query19	2.03	1.79	1.78
query20	0.02	0.01	0.02
query21	15.42	0.90	0.54
query22	0.74	1.06	0.61
query23	15.12	1.37	0.66
query24	6.87	1.10	1.05
query25	0.47	0.07	0.08
query26	0.59	0.17	0.14
query27	0.08	0.06	0.06
query28	9.26	0.95	0.45
query29	12.58	4.00	3.34
query30	0.26	0.08	0.06
query31	2.83	0.59	0.40
query32	3.24	0.57	0.47
query33	3.09	3.06	3.14
query34	16.12	5.42	4.78
query35	4.83	4.85	4.79
query36	0.70	0.54	0.49
query37	0.09	0.06	0.07
query38	0.05	0.05	0.04
query39	0.04	0.03	0.02
query40	0.18	0.15	0.14
query41	0.08	0.02	0.02
query42	0.03	0.02	0.02
query43	0.04	0.03	0.03
Total cold run time: 103.96 s
Total hot run time: 29.7 s

doris-robot avatar Jun 19 '25 15:06 doris-robot

FE UT Coverage Report

Increment line coverage 58.57% (950/1622) :tada: Increment coverage report Complete coverage report

hello-stephen avatar Jun 19 '25 15:06 hello-stephen

run buildall

starocean999 avatar Jun 20 '25 06:06 starocean999

run buildall

starocean999 avatar Jun 20 '25 08:06 starocean999

run buildall

starocean999 avatar Jun 20 '25 08:06 starocean999

TPC-H: Total hot run time: 34348 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 4bdd4eff436f601a80db06793fd03381c35108b6, data reload: false

------ Round 1 ----------------------------------
q1	17589	5187	5096	5096
q2	1969	306	194	194
q3	10284	1315	776	776
q4	10278	1021	561	561
q5	8085	2394	2305	2305
q6	187	160	135	135
q7	901	756	616	616
q8	9322	1265	1165	1165
q9	6841	5147	5102	5102
q10	6902	2431	1978	1978
q11	503	305	287	287
q12	356	354	217	217
q13	17774	3714	3105	3105
q14	255	231	223	223
q15	583	481	487	481
q16	437	433	380	380
q17	623	904	401	401
q18	7626	7124	7101	7101
q19	1289	953	549	549
q20	351	348	235	235
q21	4069	3286	2477	2477
q22	1017	1013	964	964
Total cold run time: 107241 ms
Total hot run time: 34348 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5146	5099	5090	5090
q2	245	322	220	220
q3	2201	2662	2307	2307
q4	1403	1835	1290	1290
q5	4255	4246	4470	4246
q6	224	178	130	130
q7	2028	1965	1795	1795
q8	2608	2447	2516	2447
q9	7134	7146	7123	7123
q10	3138	3247	2830	2830
q11	587	508	501	501
q12	719	763	607	607
q13	3450	3955	3337	3337
q14	284	299	277	277
q15	525	484	484	484
q16	452	496	439	439
q17	1182	1565	1382	1382
q18	7751	7442	7359	7359
q19	817	830	1026	830
q20	1993	2023	1894	1894
q21	4885	4545	4308	4308
q22	1049	1024	982	982
Total cold run time: 52076 ms
Total hot run time: 49878 ms

doris-robot avatar Jun 20 '25 09:06 doris-robot

TPC-DS: Total hot run time: 186281 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 4bdd4eff436f601a80db06793fd03381c35108b6, data reload: false

query1	1007	397	407	397
query2	6535	1824	1799	1799
query3	6751	228	226	226
query4	26270	23434	23106	23106
query5	4419	654	479	479
query6	318	222	224	222
query7	4632	505	308	308
query8	286	240	211	211
query9	8645	2672	2673	2672
query10	474	332	286	286
query11	15905	15137	14988	14988
query12	171	116	107	107
query13	1670	534	410	410
query14	9578	6173	6185	6173
query15	216	197	183	183
query16	7489	643	476	476
query17	1205	743	598	598
query18	2043	420	318	318
query19	206	211	169	169
query20	125	123	118	118
query21	226	129	114	114
query22	4069	4010	4024	4010
query23	34193	33208	33208	33208
query24	8517	2417	2406	2406
query25	533	470	395	395
query26	1228	277	158	158
query27	2740	513	348	348
query28	4326	2127	2129	2127
query29	752	553	439	439
query30	282	215	195	195
query31	938	838	765	765
query32	77	68	70	68
query33	566	395	340	340
query34	834	859	548	548
query35	809	838	738	738
query36	957	990	882	882
query37	110	98	84	84
query38	4052	4161	4103	4103
query39	1482	1441	1423	1423
query40	219	123	107	107
query41	64	59	62	59
query42	134	112	109	109
query43	495	483	485	483
query44	1371	835	835	835
query45	183	173	191	173
query46	885	1032	640	640
query47	1752	1820	1720	1720
query48	385	434	314	314
query49	757	475	393	393
query50	670	692	408	408
query51	4180	4179	4135	4135
query52	117	112	106	106
query53	238	276	195	195
query54	588	577	520	520
query55	86	87	85	85
query56	322	310	292	292
query57	1187	1171	1109	1109
query58	278	270	271	270
query59	2551	2636	2508	2508
query60	342	337	314	314
query61	131	126	148	126
query62	841	732	664	664
query63	219	192	190	190
query64	4291	1014	713	713
query65	4276	4211	4201	4201
query66	1138	420	315	315
query67	15549	15538	15437	15437
query68	8007	895	539	539
query69	472	310	266	266
query70	1124	1136	1080	1080
query71	456	322	301	301
query72	5532	4703	4665	4665
query73	715	582	352	352
query74	8896	9147	8693	8693
query75	3877	3232	2695	2695
query76	3752	1216	777	777
query77	785	413	302	302
query78	10012	10217	9386	9386
query79	1977	828	589	589
query80	599	528	475	475
query81	486	266	231	231
query82	426	130	102	102
query83	257	257	239	239
query84	254	109	85	85
query85	801	366	318	318
query86	335	307	302	302
query87	4516	4462	4299	4299
query88	3294	2332	2369	2332
query89	381	323	286	286
query90	1979	220	211	211
query91	144	141	114	114
query92	81	63	59	59
query93	1135	949	599	599
query94	678	406	279	279
query95	379	294	295	294
query96	495	570	283	283
query97	2708	2738	2640	2640
query98	245	212	201	201
query99	1467	1414	1269	1269
Total cold run time: 274150 ms
Total hot run time: 186281 ms

doris-robot avatar Jun 20 '25 09:06 doris-robot

ClickBench: Total hot run time: 29.43 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 4bdd4eff436f601a80db06793fd03381c35108b6, data reload: false

query1	0.04	0.03	0.03
query2	0.08	0.03	0.04
query3	0.24	0.07	0.07
query4	1.62	0.11	0.10
query5	0.43	0.43	0.42
query6	1.19	0.67	0.67
query7	0.02	0.02	0.01
query8	0.04	0.04	0.03
query9	0.58	0.52	0.50
query10	0.58	0.58	0.56
query11	0.16	0.11	0.11
query12	0.15	0.11	0.12
query13	0.63	0.62	0.61
query14	0.81	0.83	0.84
query15	0.92	0.87	0.87
query16	0.38	0.38	0.39
query17	1.07	1.09	1.11
query18	0.22	0.21	0.21
query19	1.97	1.86	1.94
query20	0.02	0.01	0.02
query21	15.40	0.93	0.55
query22	0.77	1.22	0.72
query23	14.80	1.40	0.60
query24	7.00	1.77	0.53
query25	0.49	0.20	0.08
query26	0.66	0.17	0.13
query27	0.07	0.05	0.05
query28	9.70	0.90	0.45
query29	12.56	3.97	3.36
query30	0.25	0.09	0.07
query31	2.83	0.64	0.41
query32	3.25	0.56	0.47
query33	3.14	3.19	3.10
query34	15.97	5.43	4.78
query35	4.83	4.82	4.79
query36	0.69	0.50	0.50
query37	0.08	0.07	0.07
query38	0.06	0.04	0.03
query39	0.03	0.02	0.02
query40	0.18	0.15	0.13
query41	0.09	0.03	0.03
query42	0.03	0.03	0.03
query43	0.04	0.03	0.03
Total cold run time: 104.07 s
Total hot run time: 29.43 s

doris-robot avatar Jun 20 '25 09:06 doris-robot

FE UT Coverage Report

Increment line coverage 58.50% (950/1624) :tada: Increment coverage report Complete coverage report

hello-stephen avatar Jun 20 '25 10:06 hello-stephen

run buildall

starocean999 avatar Jun 20 '25 14:06 starocean999

TPC-H: Total hot run time: 34321 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 5438f7ea8f8aab3d3c5ecd8a6193b5958ca50b60, data reload: false

------ Round 1 ----------------------------------
q1	17625	5258	5112	5112
q2	1941	290	193	193
q3	10367	1369	777	777
q4	10307	1041	525	525
q5	8607	2412	2379	2379
q6	185	163	135	135
q7	921	735	593	593
q8	9314	1306	1119	1119
q9	6799	5164	5142	5142
q10	6890	2387	1970	1970
q11	483	307	288	288
q12	346	349	221	221
q13	17788	3787	3095	3095
q14	239	239	228	228
q15	561	486	482	482
q16	442	429	371	371
q17	646	879	382	382
q18	7667	7214	7136	7136
q19	1461	966	555	555
q20	358	355	233	233
q21	3833	3295	2415	2415
q22	1045	1023	970	970
Total cold run time: 107825 ms
Total hot run time: 34321 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5196	5126	5126	5126
q2	250	320	229	229
q3	2131	2680	2305	2305
q4	1378	1813	1414	1414
q5	4209	4309	4411	4309
q6	219	174	129	129
q7	2014	1959	1811	1811
q8	2634	2545	2545	2545
q9	7173	7137	7133	7133
q10	3102	3249	2887	2887
q11	576	500	510	500
q12	669	778	610	610
q13	3581	3871	3272	3272
q14	295	302	288	288
q15	528	483	481	481
q16	470	510	436	436
q17	1146	1583	1349	1349
q18	7808	7448	7375	7375
q19	850	828	989	828
q20	2009	2105	1852	1852
q21	5011	4488	4375	4375
q22	1056	1016	970	970
Total cold run time: 52305 ms
Total hot run time: 50224 ms

doris-robot avatar Jun 20 '25 15:06 doris-robot

TPC-DS: Total hot run time: 185458 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 5438f7ea8f8aab3d3c5ecd8a6193b5958ca50b60, data reload: false

query1	983	402	390	390
query2	6521	1806	1807	1806
query3	6742	225	224	224
query4	25926	23553	23025	23025
query5	4370	652	483	483
query6	314	214	206	206
query7	4639	528	290	290
query8	273	235	226	226
query9	8594	2626	2663	2626
query10	488	335	274	274
query11	15458	15098	14815	14815
query12	160	114	109	109
query13	1672	550	419	419
query14	8775	6131	6457	6131
query15	215	199	181	181
query16	7236	640	468	468
query17	1214	731	588	588
query18	1995	414	322	322
query19	223	199	171	171
query20	135	120	117	117
query21	217	129	119	119
query22	4208	4226	3982	3982
query23	34158	33348	33248	33248
query24	8498	2357	2382	2357
query25	550	453	375	375
query26	1245	275	156	156
query27	2758	509	356	356
query28	4323	2125	2107	2107
query29	779	544	437	437
query30	280	217	189	189
query31	934	835	794	794
query32	81	65	63	63
query33	591	359	303	303
query34	788	856	545	545
query35	782	831	723	723
query36	948	977	869	869
query37	116	99	79	79
query38	4153	4050	4011	4011
query39	1494	1467	1449	1449
query40	214	120	111	111
query41	64	59	60	59
query42	124	112	117	112
query43	486	515	483	483
query44	1305	848	829	829
query45	180	179	164	164
query46	843	1018	625	625
query47	1764	1770	1730	1730
query48	390	418	310	310
query49	723	486	391	391
query50	661	687	400	400
query51	4200	4185	4102	4102
query52	114	118	105	105
query53	228	259	182	182
query54	583	571	504	504
query55	88	86	84	84
query56	320	308	307	307
query57	1157	1192	1146	1146
query58	275	265	256	256
query59	2565	2621	2524	2524
query60	335	330	309	309
query61	153	143	124	124
query62	791	716	657	657
query63	227	185	191	185
query64	4353	998	691	691
query65	4286	4197	4191	4191
query66	1146	454	335	335
query67	15963	15552	15301	15301
query68	8131	898	545	545
query69	482	301	265	265
query70	1188	1120	1075	1075
query71	476	327	313	313
query72	5775	4708	4660	4660
query73	684	599	354	354
query74	8867	8898	8685	8685
query75	3985	3212	2692	2692
query76	3732	1212	763	763
query77	788	367	295	295
query78	10092	10218	9273	9273
query79	2741	812	581	581
query80	776	521	467	467
query81	513	261	233	233
query82	451	128	109	109
query83	283	258	237	237
query84	301	106	84	84
query85	804	357	385	357
query86	412	296	281	281
query87	4396	4392	4394	4392
query88	3615	2302	2303	2302
query89	381	318	299	299
query90	1828	220	212	212
query91	142	143	113	113
query92	85	62	61	61
query93	2148	964	597	597
query94	671	423	300	300
query95	380	294	284	284
query96	509	575	286	286
query97	2784	2791	2607	2607
query98	234	212	214	212
query99	1470	1429	1274	1274
Total cold run time: 275498 ms
Total hot run time: 185458 ms

doris-robot avatar Jun 20 '25 15:06 doris-robot

ClickBench: Total hot run time: 30.12 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 5438f7ea8f8aab3d3c5ecd8a6193b5958ca50b60, data reload: false

query1	0.04	0.03	0.03
query2	0.07	0.04	0.03
query3	0.24	0.07	0.07
query4	1.60	0.10	0.11
query5	0.43	0.42	0.40
query6	1.15	0.65	0.68
query7	0.02	0.02	0.01
query8	0.05	0.03	0.04
query9	0.58	0.51	0.51
query10	0.58	0.58	0.56
query11	0.16	0.11	0.11
query12	0.15	0.11	0.11
query13	0.64	0.61	0.61
query14	0.81	0.82	0.82
query15	0.92	0.86	0.90
query16	0.38	0.39	0.39
query17	1.08	1.04	1.04
query18	0.22	0.21	0.21
query19	1.94	1.85	1.84
query20	0.01	0.01	0.01
query21	15.40	0.89	0.55
query22	0.76	1.36	0.69
query23	14.76	1.40	0.58
query24	7.08	1.38	1.59
query25	0.50	0.23	0.17
query26	0.54	0.16	0.13
query27	0.06	0.05	0.05
query28	10.30	0.90	0.44
query29	12.53	3.94	3.28
query30	0.26	0.09	0.06
query31	2.82	0.61	0.38
query32	3.23	0.56	0.47
query33	3.12	3.13	3.14
query34	16.07	5.40	4.80
query35	4.87	4.77	4.84
query36	0.69	0.55	0.50
query37	0.09	0.06	0.06
query38	0.05	0.04	0.05
query39	0.04	0.03	0.03
query40	0.18	0.15	0.15
query41	0.08	0.02	0.02
query42	0.03	0.03	0.03
query43	0.04	0.03	0.02
Total cold run time: 104.57 s
Total hot run time: 30.12 s

doris-robot avatar Jun 20 '25 15:06 doris-robot

run buildall

starocean999 avatar Jun 23 '25 07:06 starocean999

run buildall

starocean999 avatar Jun 23 '25 07:06 starocean999

TPC-H: Total hot run time: 33982 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit d97ecf272e2236843039efb621ee1d5957a9be9b, data reload: false

------ Round 1 ----------------------------------
q1	17591	5183	5089	5089
q2	1943	297	185	185
q3	10281	1384	730	730
q4	10214	1013	553	553
q5	7541	2412	2365	2365
q6	182	162	132	132
q7	917	732	597	597
q8	9318	1322	1118	1118
q9	6801	5054	5135	5054
q10	6893	2368	1962	1962
q11	497	293	281	281
q12	342	355	220	220
q13	17769	3661	3070	3070
q14	246	227	228	227
q15	546	485	491	485
q16	414	426	386	386
q17	609	871	365	365
q18	7581	7239	7102	7102
q19	1215	953	533	533
q20	350	341	227	227
q21	4026	3203	2350	2350
q22	1082	1031	951	951
Total cold run time: 106358 ms
Total hot run time: 33982 ms

----- Round 2, with runtime_filter_mode=off -----
q1	5116	5094	5097	5094
q2	250	319	228	228
q3	2172	2637	2295	2295
q4	1362	1820	1353	1353
q5	4225	4102	4507	4102
q6	223	172	133	133
q7	1989	1960	1787	1787
q8	2637	2648	2597	2597
q9	7215	7151	7085	7085
q10	3064	3216	2836	2836
q11	592	510	489	489
q12	690	750	601	601
q13	3484	3903	3367	3367
q14	284	309	267	267
q15	527	474	483	474
q16	445	488	442	442
q17	1174	1625	1354	1354
q18	7651	7466	7469	7466
q19	813	806	853	806
q20	1988	2059	1862	1862
q21	4906	4590	4284	4284
q22	1079	1020	970	970
Total cold run time: 51886 ms
Total hot run time: 49892 ms

doris-robot avatar Jun 23 '25 07:06 doris-robot

TPC-DS: Total hot run time: 186014 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit d97ecf272e2236843039efb621ee1d5957a9be9b, data reload: false

query1	978	389	436	389
query2	6527	1837	1807	1807
query3	6744	220	230	220
query4	26750	23537	23401	23401
query5	4355	633	492	492
query6	317	225	211	211
query7	4625	499	288	288
query8	274	238	208	208
query9	8620	2645	2661	2645
query10	477	339	274	274
query11	15271	15609	14823	14823
query12	166	111	108	108
query13	1664	549	391	391
query14	9375	6214	6198	6198
query15	208	198	178	178
query16	7241	641	421	421
query17	1165	706	549	549
query18	2000	402	294	294
query19	193	189	157	157
query20	129	114	112	112
query21	214	125	107	107
query22	3962	4226	4104	4104
query23	33962	33102	33066	33066
query24	8518	2352	2370	2352
query25	563	463	393	393
query26	1231	274	150	150
query27	2774	511	346	346
query28	4393	2126	2097	2097
query29	752	550	436	436
query30	283	216	197	197
query31	945	859	764	764
query32	76	68	66	66
query33	560	350	312	312
query34	812	863	534	534
query35	765	808	755	755
query36	958	983	893	893
query37	119	101	79	79
query38	4106	4148	4066	4066
query39	1495	1415	1435	1415
query40	219	125	116	116
query41	73	69	76	69
query42	138	119	119	119
query43	545	533	502	502
query44	1370	842	828	828
query45	186	177	168	168
query46	879	1035	641	641
query47	1727	1856	1722	1722
query48	397	418	308	308
query49	756	468	404	404
query50	668	686	398	398
query51	4105	4173	4170	4170
query52	111	113	96	96
query53	234	257	195	195
query54	572	579	511	511
query55	85	80	86	80
query56	309	305	319	305
query57	1151	1185	1112	1112
query58	264	266	277	266
query59	2634	2672	2617	2617
query60	326	313	317	313
query61	130	122	122	122
query62	788	707	677	677
query63	227	193	183	183
query64	4308	1011	664	664
query65	4255	4187	4187	4187
query66	1149	419	320	320
query67	15847	15526	15558	15526
query68	6082	899	536	536
query69	474	307	267	267
query70	1172	1141	1102	1102
query71	428	313	303	303
query72	5597	4761	4875	4761
query73	640	636	357	357
query74	9306	9085	8597	8597
query75	3210	3200	2669	2669
query76	3191	1178	758	758
query77	479	381	335	335
query78	9898	10197	9298	9298
query79	2028	793	588	588
query80	635	517	437	437
query81	505	257	226	226
query82	265	126	99	99
query83	262	259	237	237
query84	251	106	87	87
query85	745	351	315	315
query86	376	303	288	288
query87	4346	4449	4263	4263
query88	2965	2313	2312	2312
query89	384	309	295	295
query90	1923	219	214	214
query91	144	145	120	120
query92	77	64	60	60
query93	2342	929	589	589
query94	680	388	276	276
query95	393	311	304	304
query96	517	567	289	289
query97	2705	2816	2629	2629
query98	233	215	203	203
query99	1340	1397	1283	1283
Total cold run time: 270613 ms
Total hot run time: 186014 ms

doris-robot avatar Jun 23 '25 07:06 doris-robot