doris icon indicating copy to clipboard operation
doris copied to clipboard

[enhance](mtmv)Mtmv support audit log (#41499)

Open zddr opened this issue 1 year ago • 10 comments

pick: https://github.com/apache/doris/pull/41499

zddr avatar Oct 15 '24 03:10 zddr

Thank you for your contribution to Apache Doris. Don't know what should be done next? See How to process your PR

Since 2024-03-18, the Document has been moved to doris-website. See Doris Document.

doris-robot avatar Oct 15 '24 03:10 doris-robot

run buildall

zddr avatar Oct 15 '24 03:10 zddr

TPC-H: Total hot run time: 40310 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit d5857bfe6bdc92b070be7a723d0951fc6bbba988, data reload: false

------ Round 1 ----------------------------------
q1	17691	7478	7350	7350
q2	2356	152	149	149
q3	10589	1068	1080	1068
q4	10202	720	721	720
q5	7715	2765	2776	2765
q6	226	144	144	144
q7	989	640	606	606
q8	9333	1885	1916	1885
q9	6520	6387	6419	6387
q10	6956	2317	2297	2297
q11	442	251	247	247
q12	388	215	217	215
q13	17780	2959	2972	2959
q14	249	203	204	203
q15	557	515	517	515
q16	481	404	412	404
q17	964	516	516	516
q18	7244	6551	6654	6551
q19	1349	1005	984	984
q20	592	282	275	275
q21	3970	3114	3089	3089
q22	1051	989	981	981
Total cold run time: 107644 ms
Total hot run time: 40310 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7213	7219	7222	7219
q2	321	225	234	225
q3	2863	2676	2677	2676
q4	2009	1637	1634	1634
q5	5319	5408	5383	5383
q6	220	140	138	138
q7	2069	1652	1697	1652
q8	3144	3340	3294	3294
q9	8476	8432	8441	8432
q10	3408	3373	3357	3357
q11	570	479	466	466
q12	759	548	582	548
q13	16901	2950	2973	2950
q14	289	273	254	254
q15	551	507	515	507
q16	486	454	442	442
q17	1779	1532	1514	1514
q18	7721	7389	7351	7351
q19	1623	1539	1389	1389
q20	1994	1802	1797	1797
q21	5168	5027	5058	5027
q22	1050	967	1003	967
Total cold run time: 73933 ms
Total hot run time: 57222 ms

doris-robot avatar Oct 15 '24 03:10 doris-robot

TPC-DS: Total hot run time: 189703 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit d5857bfe6bdc92b070be7a723d0951fc6bbba988, data reload: false

query1	962	367	355	355
query2	6546	1985	1901	1901
query3	6714	209	224	209
query4	33799	23394	23406	23394
query5	4342	463	458	458
query6	262	160	171	160
query7	4614	304	317	304
query8	265	200	197	197
query9	9617	2650	2641	2641
query10	471	282	278	278
query11	18231	15016	15317	15016
query12	146	96	97	96
query13	1664	447	450	447
query14	9893	7232	7308	7232
query15	242	173	170	170
query16	7808	473	481	473
query17	1639	579	548	548
query18	1946	312	311	311
query19	222	147	163	147
query20	119	105	106	105
query21	212	101	102	101
query22	4382	4332	4312	4312
query23	34576	34363	34064	34064
query24	11474	2854	2799	2799
query25	671	416	400	400
query26	1662	162	157	157
query27	2852	296	287	287
query28	7926	2123	2096	2096
query29	985	450	424	424
query30	318	161	145	145
query31	1035	799	797	797
query32	94	55	58	55
query33	771	302	309	302
query34	944	490	502	490
query35	903	739	753	739
query36	1080	947	926	926
query37	140	79	78	78
query38	3992	3957	3874	3874
query39	1461	1424	1409	1409
query40	294	98	96	96
query41	47	43	43	43
query42	123	99	97	97
query43	521	488	473	473
query44	1276	783	760	760
query45	197	167	170	167
query46	1136	725	717	717
query47	1869	1815	1784	1784
query48	440	340	334	334
query49	1165	389	399	389
query50	800	415	413	413
query51	7035	6779	6827	6779
query52	101	92	90	90
query53	264	194	191	191
query54	1167	463	466	463
query55	78	77	77	77
query56	263	252	257	252
query57	1239	1159	1118	1118
query58	251	256	233	233
query59	3107	2824	2795	2795
query60	299	277	290	277
query61	123	127	133	127
query62	804	677	654	654
query63	206	181	183	181
query64	5214	629	604	604
query65	3261	3205	3209	3205
query66	1183	299	300	299
query67	15531	15340	15231	15231
query68	4735	544	529	529
query69	521	297	283	283
query70	1161	1142	1101	1101
query71	431	274	274	274
query72	7397	3841	3976	3841
query73	761	344	340	340
query74	10026	8890	8973	8890
query75	3530	2662	2648	2648
query76	3554	874	939	874
query77	504	283	292	283
query78	10101	10193	9524	9524
query79	8702	591	603	591
query80	957	448	448	448
query81	553	220	228	220
query82	1065	130	126	126
query83	236	134	136	134
query84	301	86	73	73
query85	1043	278	280	278
query86	435	304	290	290
query87	4332	4241	4366	4241
query88	4971	2392	2428	2392
query89	442	285	288	285
query90	2084	193	184	184
query91	140	105	114	105
query92	65	50	46	46
query93	5781	543	524	524
query94	1120	277	292	277
query95	338	249	251	249
query96	621	281	278	278
query97	3273	3147	3148	3147
query98	218	208	194	194
query99	1557	1290	1288	1288
Total cold run time: 313929 ms
Total hot run time: 189703 ms

doris-robot avatar Oct 15 '24 04:10 doris-robot

run performance

zddr avatar Oct 18 '24 02:10 zddr

TPC-H: Total hot run time: 39929 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit d5857bfe6bdc92b070be7a723d0951fc6bbba988, data reload: false

------ Round 1 ----------------------------------
q1	17609	7286	7185	7185
q2	2040	152	145	145
q3	10744	1040	1140	1040
q4	10554	729	709	709
q5	7751	2792	2766	2766
q6	227	148	146	146
q7	971	657	628	628
q8	9578	1900	1935	1900
q9	6555	6395	6373	6373
q10	6942	2319	2335	2319
q11	438	248	252	248
q12	394	212	211	211
q13	17775	2992	2941	2941
q14	239	209	208	208
q15	561	517	518	517
q16	511	401	415	401
q17	956	589	557	557
q18	7163	6648	6541	6541
q19	2783	1092	937	937
q20	536	275	259	259
q21	3863	3057	2912	2912
q22	1070	987	986	986
Total cold run time: 109260 ms
Total hot run time: 39929 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7325	7193	7117	7117
q2	321	229	232	229
q3	2826	2836	2828	2828
q4	1979	1786	1766	1766
q5	5629	5661	5636	5636
q6	219	140	145	140
q7	2189	1774	1757	1757
q8	3276	3480	3424	3424
q9	8598	8711	8749	8711
q10	3523	3511	3527	3511
q11	580	508	492	492
q12	779	576	588	576
q13	16532	3118	3120	3118
q14	301	267	282	267
q15	570	515	523	515
q16	517	463	472	463
q17	1804	1651	1631	1631
q18	8104	7826	7568	7568
q19	6266	1515	1530	1515
q20	2140	1810	1871	1810
q21	5297	5077	5294	5077
q22	1122	1078	988	988
Total cold run time: 79897 ms
Total hot run time: 59139 ms

doris-robot avatar Oct 18 '24 03:10 doris-robot

TPC-DS: Total hot run time: 193644 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit d5857bfe6bdc92b070be7a723d0951fc6bbba988, data reload: false

query1	1278	913	877	877
query2	6270	2016	1910	1910
query3	10828	3840	3809	3809
query4	67433	27240	23390	23390
query5	5785	457	462	457
query6	466	159	159	159
query7	6339	302	300	300
query8	295	206	201	201
query9	9526	2663	2642	2642
query10	519	277	275	275
query11	18510	15095	15829	15095
query12	168	96	100	96
query13	1645	471	440	440
query14	11307	7185	7400	7185
query15	234	176	173	173
query16	7198	513	490	490
query17	1079	567	554	554
query18	1787	306	315	306
query19	188	154	147	147
query20	109	105	106	105
query21	208	101	96	96
query22	4774	4372	4495	4372
query23	34548	33768	33790	33768
query24	5612	2798	2821	2798
query25	514	412	406	406
query26	675	161	159	159
query27	1696	306	302	302
query28	4096	2220	2192	2192
query29	676	431	428	428
query30	231	149	153	149
query31	990	777	799	777
query32	68	50	55	50
query33	455	290	284	284
query34	862	483	494	483
query35	878	723	726	723
query36	1054	909	974	909
query37	129	77	77	77
query38	3942	3874	3832	3832
query39	1513	1436	1454	1436
query40	205	99	94	94
query41	45	44	43	43
query42	122	94	106	94
query43	506	479	471	471
query44	1108	758	764	758
query45	196	165	165	165
query46	1133	712	695	695
query47	1968	1845	1897	1845
query48	434	347	339	339
query49	703	385	377	377
query50	821	405	401	401
query51	7113	6977	6830	6830
query52	109	89	100	89
query53	253	183	187	183
query54	584	462	457	457
query55	79	75	80	75
query56	279	246	271	246
query57	1242	1137	1157	1137
query58	227	226	247	226
query59	3102	2884	2826	2826
query60	301	278	271	271
query61	112	104	100	100
query62	784	649	653	649
query63	222	186	187	186
query64	1461	614	602	602
query65	3259	3150	3174	3150
query66	698	301	329	301
query67	15845	15608	15312	15312
query68	3710	524	551	524
query69	626	288	309	288
query70	1187	1108	1109	1108
query71	457	282	267	267
query72	7810	3860	4014	3860
query73	751	337	338	337
query74	10131	9000	9089	9000
query75	4624	2615	2676	2615
query76	3322	922	943	922
query77	767	288	296	288
query78	10124	9313	9309	9309
query79	8466	591	598	591
query80	1176	437	451	437
query81	560	235	223	223
query82	1197	132	131	131
query83	390	135	138	135
query84	300	82	79	79
query85	1712	285	294	285
query86	451	296	312	296
query87	4431	4269	4358	4269
query88	5399	2360	2376	2360
query89	527	286	291	286
query90	2047	181	183	181
query91	140	107	104	104
query92	63	47	48	47
query93	6476	532	531	531
query94	988	282	274	274
query95	347	250	246	246
query96	632	274	281	274
query97	3305	3122	3146	3122
query98	213	203	196	196
query99	1547	1285	1302	1285
Total cold run time: 340672 ms
Total hot run time: 193644 ms

doris-robot avatar Oct 18 '24 03:10 doris-robot

run buildall

zddr avatar Oct 18 '24 10:10 zddr

TPC-H: Total hot run time: 40676 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit b6fc3cc5afaf2fe0db68ab40cd36fbdf77020cad, data reload: false

------ Round 1 ----------------------------------
q1	17980	7597	7439	7439
q2	2687	150	145	145
q3	11076	1138	1178	1138
q4	10359	776	747	747
q5	7741	2820	2842	2820
q6	237	151	153	151
q7	991	636	626	626
q8	9351	1914	1920	1914
q9	6542	6392	6427	6392
q10	6966	2322	2300	2300
q11	445	248	262	248
q12	411	222	216	216
q13	17779	2952	2934	2934
q14	236	217	212	212
q15	551	515	506	506
q16	667	598	609	598
q17	980	608	576	576
q18	7256	6548	6626	6548
q19	1709	1041	878	878
q20	597	273	273	273
q21	3998	3119	3051	3051
q22	1109	964	990	964
Total cold run time: 109668 ms
Total hot run time: 40676 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7420	7270	7264	7264
q2	324	228	238	228
q3	2870	2660	2735	2660
q4	1899	1614	1712	1614
q5	5362	5450	5430	5430
q6	227	146	150	146
q7	2126	1660	1687	1660
q8	3217	3384	3424	3384
q9	8624	8561	8516	8516
q10	3448	3410	3409	3409
q11	583	476	490	476
q12	785	570	594	570
q13	16900	2972	2952	2952
q14	291	259	265	259
q15	560	524	510	510
q16	704	664	673	664
q17	1835	1572	1547	1547
q18	7597	7547	7162	7162
q19	1681	1578	1481	1481
q20	1987	1785	1819	1785
q21	5167	4987	5209	4987
q22	1083	1009	974	974
Total cold run time: 74690 ms
Total hot run time: 57678 ms

doris-robot avatar Oct 18 '24 11:10 doris-robot

TPC-DS: Total hot run time: 189302 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit b6fc3cc5afaf2fe0db68ab40cd36fbdf77020cad, data reload: false

query1	994	374	359	359
query2	6531	2087	2044	2044
query3	6706	218	223	218
query4	33919	23472	23398	23398
query5	4271	486	465	465
query6	260	168	159	159
query7	4616	306	310	306
query8	262	221	208	208
query9	9386	2660	2637	2637
query10	490	281	287	281
query11	18098	15222	15282	15222
query12	148	97	101	97
query13	1675	461	446	446
query14	9322	7407	7006	7006
query15	230	172	171	171
query16	7689	427	533	427
query17	1623	564	550	550
query18	1904	315	311	311
query19	207	148	157	148
query20	118	108	103	103
query21	218	110	104	104
query22	4425	4072	3959	3959
query23	34463	33841	33560	33560
query24	11557	2859	2771	2771
query25	687	399	406	399
query26	1502	168	166	166
query27	2857	299	294	294
query28	8213	2490	2468	2468
query29	978	450	432	432
query30	325	158	166	158
query31	1040	801	800	800
query32	100	58	58	58
query33	766	295	293	293
query34	957	499	507	499
query35	925	740	738	738
query36	1119	922	934	922
query37	155	91	88	88
query38	4061	3875	3881	3875
query39	1511	1423	1413	1413
query40	290	103	100	100
query41	48	45	43	43
query42	125	98	101	98
query43	552	481	487	481
query44	1269	767	768	767
query45	198	164	165	164
query46	1139	720	724	720
query47	1896	1804	1813	1804
query48	419	337	322	322
query49	1155	400	388	388
query50	825	399	413	399
query51	6950	7035	6918	6918
query52	108	93	93	93
query53	259	189	186	186
query54	1140	468	476	468
query55	79	81	78	78
query56	272	252	264	252
query57	1246	1165	1121	1121
query58	253	235	233	233
query59	3050	2886	3005	2886
query60	320	253	260	253
query61	101	101	99	99
query62	842	641	648	641
query63	214	182	178	178
query64	4404	649	610	610
query65	3243	3142	3169	3142
query66	978	300	295	295
query67	15828	15304	15024	15024
query68	4731	544	550	544
query69	505	285	283	283
query70	1193	1142	1137	1137
query71	411	297	274	274
query72	7266	3887	3889	3887
query73	779	342	335	335
query74	10330	8965	8849	8849
query75	3457	2641	2676	2641
query76	3034	851	862	851
query77	677	299	293	293
query78	11140	12664	9523	9523
query79	7542	590	590	590
query80	1190	446	444	444
query81	570	242	242	242
query82	314	145	136	136
query83	315	137	136	136
query84	298	81	78	78
query85	747	285	271	271
query86	495	302	298	298
query87	4601	4241	4341	4241
query88	4241	2347	2388	2347
query89	403	291	291	291
query90	2038	191	184	184
query91	144	107	110	107
query92	69	46	48	46
query93	1167	549	541	541
query94	927	296	284	284
query95	347	249	251	249
query96	596	276	275	275
query97	3332	3118	3143	3118
query98	217	198	192	192
query99	1829	1299	1317	1299
Total cold run time: 306416 ms
Total hot run time: 189302 ms

doris-robot avatar Oct 18 '24 11:10 doris-robot