doris icon indicating copy to clipboard operation
doris copied to clipboard

[BugFix](StoragePolicy) fix modify partition's storage policy with different resource issue succeed with execption

Open Johnnyssc opened this issue 1 year ago • 5 comments

Proposed changes

Issue Number: close #34229

when we try to modify a partition's storage policy which have different resource with the previous one, we get error message "currently do not support change origin storage policy to another one with different resource", but the modification same also succeed!

expect: the modification fail with "currently do not support change origin storage policy to another one with different resource".

Further comments

If this is a relatively large or complex change, kick off the discussion at [email protected] by explaining why you chose the solution you did and what alternatives you considered, etc...

Johnnyssc avatar May 27 '24 03:05 Johnnyssc

Thank you for your contribution to Apache Doris. Don't know what should be done next? See How to process your PR

Since 2024-03-18, the Document has been moved to doris-website. See Doris Document.

doris-robot avatar May 27 '24 03:05 doris-robot

run buildall

Johnnyssc avatar May 27 '24 03:05 Johnnyssc

TPC-H: Total hot run time: 39925 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit ca2157250148e928ee26672430455c0bbab9d1fa, data reload: false

------ Round 1 ----------------------------------
q1	17722	4443	4377	4377
q2	2708	203	197	197
q3	11192	1287	1250	1250
q4	10718	713	822	713
q5	7523	2717	2719	2717
q6	223	134	137	134
q7	983	623	606	606
q8	9284	2128	2084	2084
q9	8955	6506	6496	6496
q10	8957	3730	3668	3668
q11	449	240	237	237
q12	469	225	218	218
q13	17767	2963	3012	2963
q14	262	214	233	214
q15	515	473	477	473
q16	524	379	392	379
q17	1002	726	680	680
q18	8070	7373	7400	7373
q19	6883	1552	1531	1531
q20	661	328	312	312
q21	4928	3030	3879	3030
q22	340	281	273	273
Total cold run time: 120135 ms
Total hot run time: 39925 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4317	4249	4206	4206
q2	375	269	256	256
q3	3027	2806	2817	2806
q4	1838	1607	1621	1607
q5	5301	5283	5278	5278
q6	210	124	124	124
q7	2131	1776	1741	1741
q8	3252	3332	3346	3332
q9	8336	8393	8433	8393
q10	3906	3739	3764	3739
q11	578	480	510	480
q12	789	594	588	588
q13	16471	2990	2984	2984
q14	282	255	258	255
q15	510	478	482	478
q16	477	405	412	405
q17	1793	1478	1465	1465
q18	7579	7485	7382	7382
q19	4507	1567	1533	1533
q20	1947	1784	1781	1781
q21	4961	4666	4774	4666
q22	564	490	492	490
Total cold run time: 73151 ms
Total hot run time: 53989 ms

doris-robot avatar May 27 '24 04:05 doris-robot

TPC-DS: Total hot run time: 172206 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit ca2157250148e928ee26672430455c0bbab9d1fa, data reload: false

query1	919	399	370	370
query2	6528	2632	2367	2367
query3	6661	202	202	202
query4	21925	17321	17509	17321
query5	4123	411	412	411
query6	246	157	174	157
query7	4593	294	285	285
query8	244	181	175	175
query9	8647	2429	2421	2421
query10	455	273	260	260
query11	10607	10376	10242	10242
query12	139	91	83	83
query13	1643	361	377	361
query14	10452	7664	6103	6103
query15	198	168	165	165
query16	7823	272	259	259
query17	1850	550	520	520
query18	1960	287	285	285
query19	210	166	163	163
query20	103	86	87	86
query21	198	136	135	135
query22	4480	4279	4217	4217
query23	34044	33106	33104	33104
query24	11859	2827	2824	2824
query25	655	357	384	357
query26	1733	157	151	151
query27	3042	338	322	322
query28	7577	2057	2030	2030
query29	1079	604	602	602
query30	275	148	149	148
query31	950	777	751	751
query32	91	53	51	51
query33	765	263	263	263
query34	1043	486	483	483
query35	727	614	589	589
query36	1099	918	894	894
query37	129	65	66	65
query38	2887	2796	2835	2796
query39	874	807	806	806
query40	274	128	125	125
query41	46	44	40	40
query42	106	96	95	95
query43	622	552	548	548
query44	1216	715	739	715
query45	173	166	161	161
query46	1066	715	691	691
query47	1873	1787	1793	1787
query48	369	296	301	296
query49	1129	387	378	378
query50	780	403	397	397
query51	6716	6797	6688	6688
query52	100	91	112	91
query53	349	294	289	289
query54	1015	432	421	421
query55	75	70	71	70
query56	260	234	242	234
query57	1113	1047	1067	1047
query58	234	210	209	209
query59	3471	3315	3222	3222
query60	279	283	264	264
query61	93	91	90	90
query62	640	446	436	436
query63	313	285	296	285
query64	9849	2258	1735	1735
query65	3209	3105	3148	3105
query66	1363	344	333	333
query67	15540	14711	14800	14711
query68	4927	526	528	526
query69	480	264	276	264
query70	1161	1128	1140	1128
query71	479	267	261	261
query72	7570	5900	5374	5374
query73	766	326	322	322
query74	6114	5699	5731	5699
query75	3522	2630	2623	2623
query76	3123	995	901	901
query77	653	271	260	260
query78	10290	9879	9867	9867
query79	2351	520	511	511
query80	906	441	432	432
query81	523	220	217	217
query82	1337	90	98	90
query83	292	165	183	165
query84	231	89	82	82
query85	1513	280	279	279
query86	472	333	302	302
query87	3289	3185	3103	3103
query88	4120	2419	2419	2419
query89	477	402	389	389
query90	1948	191	192	191
query91	138	111	107	107
query92	60	51	52	51
query93	2128	504	499	499
query94	1202	200	196	196
query95	428	326	331	326
query96	591	266	264	264
query97	3166	2999	3073	2999
query98	240	219	232	219
query99	1132	853	857	853
Total cold run time: 280735 ms
Total hot run time: 172206 ms

doris-robot avatar May 27 '24 04:05 doris-robot

ClickBench: Total hot run time: 30.11 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit ca2157250148e928ee26672430455c0bbab9d1fa, data reload: false

query1	0.04	0.04	0.03
query2	0.08	0.04	0.04
query3	0.23	0.05	0.06
query4	1.66	0.07	0.07
query5	0.49	0.50	0.50
query6	1.13	0.72	0.72
query7	0.02	0.01	0.02
query8	0.05	0.04	0.04
query9	0.54	0.49	0.50
query10	0.54	0.56	0.55
query11	0.15	0.12	0.11
query12	0.14	0.12	0.11
query13	0.59	0.58	0.60
query14	0.76	0.80	0.77
query15	0.83	0.82	0.80
query16	0.36	0.34	0.37
query17	0.95	0.95	0.97
query18	0.19	0.29	0.24
query19	1.77	1.71	1.65
query20	0.01	0.01	0.01
query21	15.71	0.67	0.67
query22	4.42	7.27	1.56
query23	18.24	1.36	1.29
query24	1.40	0.42	0.20
query25	0.14	0.08	0.07
query26	0.25	0.15	0.16
query27	0.08	0.08	0.08
query28	13.35	1.01	1.00
query29	13.13	3.30	3.27
query30	0.24	0.06	0.05
query31	2.89	0.37	0.38
query32	3.25	0.48	0.47
query33	2.88	2.95	3.00
query34	17.14	4.48	4.40
query35	4.51	4.50	4.48
query36	0.65	0.47	0.46
query37	0.18	0.15	0.15
query38	0.15	0.14	0.15
query39	0.05	0.04	0.03
query40	0.17	0.13	0.14
query41	0.08	0.05	0.05
query42	0.05	0.04	0.05
query43	0.04	0.04	0.04
Total cold run time: 109.53 s
Total hot run time: 30.11 s

doris-robot avatar May 27 '24 04:05 doris-robot

run buildall

Johnnyssc avatar May 29 '24 06:05 Johnnyssc

TPC-H: Total hot run time: 41841 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit c564f36bd7abae2d9350e7bcf74659fae1a2fffa, data reload: false

------ Round 1 ----------------------------------
q1	17601	4323	4704	4323
q2	2028	201	199	199
q3	10441	1221	1233	1221
q4	10216	862	788	788
q5	7503	2720	2628	2628
q6	215	134	133	133
q7	963	631	625	625
q8	9229	2130	2081	2081
q9	9829	6722	6699	6699
q10	9235	3918	3854	3854
q11	443	244	251	244
q12	456	223	229	223
q13	17187	3179	3237	3179
q14	276	218	215	215
q15	498	480	476	476
q16	491	393	395	393
q17	983	756	677	677
q18	8333	7874	7762	7762
q19	4100	1560	1571	1560
q20	636	325	344	325
q21	5200	3955	4143	3955
q22	352	300	281	281
Total cold run time: 116215 ms
Total hot run time: 41841 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4523	4449	4421	4421
q2	371	267	273	267
q3	3079	2923	2812	2812
q4	1881	1584	1625	1584
q5	5456	5486	5469	5469
q6	217	129	125	125
q7	2156	1835	1765	1765
q8	3256	3379	3332	3332
q9	8631	8689	8706	8689
q10	3997	3699	3781	3699
q11	602	498	482	482
q12	808	617	622	617
q13	16268	3130	3123	3123
q14	300	273	295	273
q15	524	487	483	483
q16	509	440	462	440
q17	1783	1501	1479	1479
q18	7726	7649	7466	7466
q19	1664	1543	1596	1543
q20	2011	1801	1794	1794
q21	12555	4721	4697	4697
q22	568	489	499	489
Total cold run time: 78885 ms
Total hot run time: 55049 ms

doris-robot avatar May 29 '24 06:05 doris-robot

TPC-DS: Total hot run time: 172252 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit c564f36bd7abae2d9350e7bcf74659fae1a2fffa, data reload: false

query1	923	393	378	378
query2	7594	2457	2456	2456
query3	6636	211	213	211
query4	20068	17486	17416	17416
query5	4105	424	424	424
query6	252	163	159	159
query7	4589	297	282	282
query8	232	175	192	175
query9	8727	2472	2475	2472
query10	473	280	264	264
query11	10707	10190	10313	10190
query12	144	90	86	86
query13	1638	402	365	365
query14	10058	6564	5974	5974
query15	216	163	163	163
query16	7116	284	259	259
query17	1010	539	521	521
query18	1869	277	270	270
query19	200	163	155	155
query20	96	89	88	88
query21	195	133	140	133
query22	4266	4317	3978	3978
query23	33387	33085	33079	33079
query24	7018	2799	2916	2799
query25	465	348	354	348
query26	696	167	158	158
query27	1896	316	326	316
query28	3836	2106	2094	2094
query29	836	620	590	590
query30	227	151	151	151
query31	941	765	745	745
query32	61	52	52	52
query33	506	272	262	262
query34	884	472	485	472
query35	720	630	591	591
query36	1023	933	892	892
query37	102	64	67	64
query38	2924	2804	2820	2804
query39	847	804	789	789
query40	196	123	126	123
query41	46	44	41	41
query42	104	96	94	94
query43	586	571	549	549
query44	1055	732	749	732
query45	178	167	167	167
query46	1067	759	717	717
query47	1861	1798	1819	1798
query48	399	293	294	293
query49	760	379	378	378
query50	765	394	377	377
query51	6780	6774	6617	6617
query52	105	92	86	86
query53	350	282	280	280
query54	550	444	439	439
query55	74	72	71	71
query56	259	243	250	243
query57	1108	1033	1079	1033
query58	223	220	216	216
query59	3387	3349	3185	3185
query60	303	255	256	255
query61	86	89	84	84
query62	554	445	448	445
query63	311	286	285	285
query64	2526	1728	1791	1728
query65	3163	3065	3097	3065
query66	908	333	324	324
query67	15356	14836	14849	14836
query68	4568	554	560	554
query69	445	268	271	268
query70	1125	1132	1114	1114
query71	406	272	269	269
query72	7497	5368	5430	5368
query73	739	346	328	328
query74	6028	5579	5692	5579
query75	3311	2599	2616	2599
query76	2217	1017	975	975
query77	391	262	261	261
query78	10182	9996	9996	9996
query79	1836	522	522	522
query80	979	438	430	430
query81	526	222	216	216
query82	960	91	91	91
query83	248	167	170	167
query84	262	85	86	85
query85	970	277	265	265
query86	404	320	300	300
query87	3287	3192	3158	3158
query88	3379	2460	2465	2460
query89	481	395	371	371
query90	1968	191	188	188
query91	127	100	104	100
query92	59	50	51	50
query93	1692	519	524	519
query94	1102	195	204	195
query95	429	336	329	329
query96	594	270	271	270
query97	3216	3072	3091	3072
query98	230	227	214	214
query99	1158	876	853	853
Total cold run time: 251359 ms
Total hot run time: 172252 ms

doris-robot avatar May 29 '24 06:05 doris-robot

ClickBench: Total hot run time: 30.75 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit c564f36bd7abae2d9350e7bcf74659fae1a2fffa, data reload: false

query1	0.04	0.03	0.03
query2	0.08	0.04	0.04
query3	0.22	0.06	0.06
query4	1.66	0.09	0.09
query5	0.51	0.49	0.52
query6	1.12	0.72	0.72
query7	0.02	0.02	0.01
query8	0.05	0.04	0.05
query9	0.53	0.48	0.48
query10	0.54	0.56	0.54
query11	0.15	0.12	0.12
query12	0.15	0.12	0.12
query13	0.58	0.60	0.60
query14	0.77	0.79	0.79
query15	0.84	0.82	0.81
query16	0.36	0.34	0.37
query17	0.99	0.94	0.96
query18	0.21	0.23	0.26
query19	1.79	1.71	1.72
query20	0.02	0.01	0.01
query21	15.45	0.68	0.68
query22	4.47	6.92	2.04
query23	18.35	1.46	1.34
query24	1.85	0.26	0.22
query25	0.15	0.08	0.09
query26	0.25	0.16	0.16
query27	0.08	0.08	0.08
query28	13.25	1.01	1.00
query29	13.31	3.26	3.24
query30	0.25	0.06	0.06
query31	2.88	0.37	0.38
query32	3.29	0.46	0.46
query33	2.92	2.94	2.90
query34	17.02	4.45	4.51
query35	4.46	4.44	4.64
query36	0.66	0.46	0.47
query37	0.18	0.16	0.16
query38	0.15	0.15	0.15
query39	0.05	0.04	0.04
query40	0.16	0.14	0.15
query41	0.10	0.04	0.05
query42	0.06	0.04	0.04
query43	0.04	0.03	0.04
Total cold run time: 110.01 s
Total hot run time: 30.75 s

doris-robot avatar May 29 '24 06:05 doris-robot

run p0

Johnnyssc avatar May 29 '24 12:05 Johnnyssc

run buildall

Johnnyssc avatar Jun 01 '24 02:06 Johnnyssc

TPC-H: Total hot run time: 40857 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit cd02604448e1536297020d70d581df9d15c18b4e, data reload: false

------ Round 1 ----------------------------------
q1	17608	4300	4264	4264
q2	2015	198	204	198
q3	10440	1232	1155	1155
q4	10190	740	861	740
q5	7586	2701	2692	2692
q6	239	137	139	137
q7	958	618	625	618
q8	9220	2137	2084	2084
q9	9682	6722	6671	6671
q10	9197	3887	3902	3887
q11	444	249	253	249
q12	439	243	241	241
q13	17214	3301	3205	3205
q14	284	221	213	213
q15	512	494	465	465
q16	523	413	396	396
q17	999	778	683	683
q18	8125	7881	7767	7767
q19	7092	1408	1310	1310
q20	648	328	334	328
q21	5117	3222	4176	3222
q22	390	337	332	332
Total cold run time: 118922 ms
Total hot run time: 40857 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4643	4393	4509	4393
q2	388	283	276	276
q3	3123	2888	2919	2888
q4	1990	1680	1714	1680
q5	5349	5388	5501	5388
q6	224	131	131	131
q7	2181	1844	1779	1779
q8	3222	3394	3406	3394
q9	8683	8677	8588	8588
q10	4047	3865	3888	3865
q11	603	498	500	498
q12	803	620	640	620
q13	15941	3037	3083	3037
q14	313	267	261	261
q15	514	479	465	465
q16	510	422	438	422
q17	1818	1498	1501	1498
q18	7950	7802	7492	7492
q19	1773	1542	1593	1542
q20	4235	1814	1789	1789
q21	7750	4750	4651	4651
q22	833	502	507	502
Total cold run time: 76893 ms
Total hot run time: 55159 ms

doris-robot avatar Jun 01 '24 03:06 doris-robot

TPC-DS: Total hot run time: 169049 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit cd02604448e1536297020d70d581df9d15c18b4e, data reload: false

query1	897	374	378	374
query2	6450	2425	2201	2201
query3	6628	208	204	204
query4	18782	17235	17443	17235
query5	4225	442	446	442
query6	246	158	154	154
query7	4538	295	285	285
query8	307	289	270	270
query9	8584	2438	2415	2415
query10	433	306	276	276
query11	10610	10155	10018	10018
query12	138	91	89	89
query13	1605	354	356	354
query14	10060	6931	7558	6931
query15	231	183	185	183
query16	7843	271	273	271
query17	1521	539	517	517
query18	1956	275	266	266
query19	206	147	149	147
query20	93	82	87	82
query21	208	135	126	126
query22	4279	4067	4052	4052
query23	33610	33019	32902	32902
query24	11192	2805	2821	2805
query25	663	350	362	350
query26	1177	153	153	153
query27	2981	332	318	318
query28	7438	2061	2044	2044
query29	872	615	603	603
query30	270	146	149	146
query31	963	772	747	747
query32	93	52	55	52
query33	766	289	278	278
query34	973	472	469	469
query35	741	609	604	604
query36	1083	944	916	916
query37	164	69	69	69
query38	2913	2770	2775	2770
query39	856	781	782	781
query40	206	121	124	121
query41	52	50	50	50
query42	111	95	96	95
query43	558	544	517	517
query44	1201	711	735	711
query45	204	171	165	165
query46	1074	704	706	704
query47	1857	1743	1762	1743
query48	370	293	284	284
query49	991	391	406	391
query50	772	398	382	382
query51	6671	6640	6651	6640
query52	106	89	100	89
query53	359	285	286	285
query54	849	450	464	450
query55	72	70	70	70
query56	275	254	267	254
query57	1083	1036	1046	1036
query58	255	239	257	239
query59	3425	2967	3010	2967
query60	282	272	297	272
query61	94	94	90	90
query62	610	450	465	450
query63	318	281	288	281
query64	8913	2235	1741	1741
query65	3158	3081	3111	3081
query66	811	321	324	321
query67	15354	14867	14817	14817
query68	6080	529	529	529
query69	602	395	361	361
query70	1172	1145	1101	1101
query71	464	280	281	280
query72	7653	2784	2558	2558
query73	765	325	328	325
query74	6020	5589	5639	5589
query75	3798	2678	2647	2647
query76	3573	955	919	919
query77	620	292	285	285
query78	10280	9844	9727	9727
query79	1147	500	514	500
query80	692	461	452	452
query81	580	227	214	214
query82	602	102	100	100
query83	187	167	169	167
query84	257	89	87	87
query85	1262	277	264	264
query86	396	286	299	286
query87	3340	3102	3120	3102
query88	4073	2424	2407	2407
query89	462	374	373	373
query90	1847	184	185	184
query91	121	95	100	95
query92	60	51	51	51
query93	1834	506	506	506
query94	1223	194	185	185
query95	410	309	317	309
query96	576	265	266	265
query97	3156	2991	3008	2991
query98	240	215	211	211
query99	1244	863	834	834
Total cold run time: 271362 ms
Total hot run time: 169049 ms

doris-robot avatar Jun 01 '24 03:06 doris-robot

ClickBench: Total hot run time: 30.43 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit cd02604448e1536297020d70d581df9d15c18b4e, data reload: false

query1	0.04	0.03	0.04
query2	0.09	0.04	0.04
query3	0.22	0.05	0.06
query4	1.67	0.07	0.08
query5	0.50	0.48	0.50
query6	1.12	0.72	0.73
query7	0.02	0.01	0.01
query8	0.05	0.04	0.04
query9	0.52	0.50	0.49
query10	0.54	0.54	0.53
query11	0.16	0.11	0.11
query12	0.15	0.12	0.12
query13	0.59	0.58	0.59
query14	0.78	0.76	0.77
query15	0.83	0.81	0.82
query16	0.36	0.37	0.35
query17	0.98	0.94	0.93
query18	0.21	0.25	0.24
query19	1.73	1.64	1.67
query20	0.01	0.02	0.01
query21	15.57	0.66	0.67
query22	4.50	6.97	1.88
query23	18.32	1.35	1.24
query24	2.10	0.21	0.19
query25	0.14	0.09	0.08
query26	0.26	0.17	0.17
query27	0.08	0.08	0.08
query28	13.29	1.01	1.00
query29	13.36	3.31	3.32
query30	0.24	0.06	0.05
query31	2.90	0.38	0.39
query32	3.28	0.47	0.48
query33	2.95	2.89	2.91
query34	16.96	4.45	4.42
query35	4.47	4.54	4.66
query36	0.65	0.46	0.46
query37	0.17	0.16	0.16
query38	0.15	0.15	0.15
query39	0.04	0.04	0.04
query40	0.15	0.15	0.14
query41	0.08	0.04	0.04
query42	0.06	0.05	0.04
query43	0.04	0.03	0.04
Total cold run time: 110.33 s
Total hot run time: 30.43 s

doris-robot avatar Jun 01 '24 03:06 doris-robot

run p0

Johnnyssc avatar Jun 01 '24 11:06 Johnnyssc

run buildall

Johnnyssc avatar Jun 03 '24 03:06 Johnnyssc

TPC-H: Total hot run time: 39944 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit caec0aeb78172cff97d172b69de074c42b2713a7, data reload: false

------ Round 1 ----------------------------------
q1	17641	4437	4242	4242
q2	2026	194	196	194
q3	10592	1249	1154	1154
q4	10284	792	792	792
q5	7528	2687	2649	2649
q6	223	138	152	138
q7	973	615	598	598
q8	9452	2125	2069	2069
q9	9360	6607	6628	6607
q10	9439	3711	3774	3711
q11	468	238	229	229
q12	500	227	223	223
q13	17812	2963	2975	2963
q14	271	227	220	220
q15	510	464	464	464
q16	533	385	376	376
q17	950	600	677	600
q18	8060	7455	7323	7323
q19	1799	1490	1567	1490
q20	655	308	298	298
q21	5037	3834	3279	3279
q22	385	333	325	325
Total cold run time: 114498 ms
Total hot run time: 39944 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4434	4221	4242	4221
q2	368	263	277	263
q3	2982	2743	2746	2743
q4	1868	1631	1594	1594
q5	5216	5243	5238	5238
q6	220	127	128	127
q7	2081	1740	1754	1740
q8	3188	3300	3318	3300
q9	8296	8392	8400	8392
q10	3914	3646	3635	3635
q11	561	485	490	485
q12	750	577	609	577
q13	16352	3010	3039	3010
q14	295	265	255	255
q15	516	472	488	472
q16	473	412	418	412
q17	1773	1506	1479	1479
q18	7663	7657	7337	7337
q19	1726	1524	1576	1524
q20	1965	1763	1753	1753
q21	4841	4650	4774	4650
q22	609	548	543	543
Total cold run time: 70091 ms
Total hot run time: 53750 ms

doris-robot avatar Jun 03 '24 03:06 doris-robot

TPC-DS: Total hot run time: 171946 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit caec0aeb78172cff97d172b69de074c42b2713a7, data reload: false

query1	935	382	356	356
query2	6438	2507	2280	2280
query3	6652	202	207	202
query4	20168	17439	17174	17174
query5	4123	469	448	448
query6	253	159	156	156
query7	4589	296	299	296
query8	317	284	288	284
query9	8491	2367	2343	2343
query10	457	297	284	284
query11	10533	10138	10088	10088
query12	141	88	86	86
query13	1634	383	376	376
query14	10131	7101	6037	6037
query15	230	185	183	183
query16	7793	265	262	262
query17	1846	525	515	515
query18	1965	271	283	271
query19	197	159	153	153
query20	97	86	83	83
query21	216	127	127	127
query22	4351	4362	4171	4171
query23	33683	33177	32950	32950
query24	11890	2821	2938	2821
query25	671	352	358	352
query26	1801	157	155	155
query27	3141	329	320	320
query28	7708	2065	2046	2046
query29	1138	611	602	602
query30	292	148	155	148
query31	939	739	730	730
query32	93	55	53	53
query33	752	278	275	275
query34	1042	478	479	478
query35	747	612	594	594
query36	1099	930	882	882
query37	291	67	72	67
query38	2885	2717	2738	2717
query39	854	788	811	788
query40	284	123	125	123
query41	52	52	53	52
query42	125	97	95	95
query43	581	562	529	529
query44	1193	731	760	731
query45	201	161	171	161
query46	1077	714	724	714
query47	1842	1764	1788	1764
query48	394	308	304	304
query49	1200	423	409	409
query50	774	389	386	386
query51	6968	6734	6772	6734
query52	105	92	91	91
query53	355	292	295	292
query54	960	453	447	447
query55	74	72	75	72
query56	274	253	285	253
query57	1134	1021	1082	1021
query58	274	242	235	235
query59	3289	3083	3142	3083
query60	289	270	276	270
query61	91	89	92	89
query62	655	449	443	443
query63	318	286	286	286
query64	9835	2321	1843	1843
query65	3191	3106	3104	3104
query66	1360	335	347	335
query67	15703	14933	14992	14933
query68	6120	547	531	531
query69	648	449	437	437
query70	1181	1132	1102	1102
query71	496	282	280	280
query72	7671	5734	5403	5403
query73	788	322	325	322
query74	5874	5539	5539	5539
query75	3945	2674	2652	2652
query76	3687	933	978	933
query77	611	284	297	284
query78	10263	9865	9842	9842
query79	2770	516	511	511
query80	2175	458	457	457
query81	556	222	221	221
query82	1062	105	100	100
query83	293	232	173	173
query84	284	94	84	84
query85	1385	276	268	268
query86	454	294	310	294
query87	3283	3074	3090	3074
query88	3739	2456	2438	2438
query89	468	388	377	377
query90	1817	188	201	188
query91	128	101	102	101
query92	65	52	50	50
query93	2374	529	507	507
query94	1176	194	186	186
query95	414	323	328	323
query96	594	267	270	267
query97	3197	3005	3026	3005
query98	241	224	209	209
query99	1224	891	836	836
Total cold run time: 282164 ms
Total hot run time: 171946 ms

doris-robot avatar Jun 03 '24 03:06 doris-robot

ClickBench: Total hot run time: 30.78 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit caec0aeb78172cff97d172b69de074c42b2713a7, data reload: false

query1	0.03	0.03	0.03
query2	0.08	0.03	0.04
query3	0.23	0.05	0.05
query4	1.69	0.08	0.07
query5	0.50	0.49	0.48
query6	1.13	0.72	0.72
query7	0.02	0.01	0.02
query8	0.05	0.04	0.05
query9	0.54	0.49	0.50
query10	0.53	0.55	0.53
query11	0.15	0.11	0.12
query12	0.15	0.12	0.12
query13	0.59	0.59	0.61
query14	0.77	0.77	0.76
query15	0.82	0.81	0.81
query16	0.36	0.35	0.37
query17	0.99	0.97	0.97
query18	0.21	0.22	0.23
query19	1.76	1.70	1.66
query20	0.01	0.01	0.01
query21	15.72	0.65	0.64
query22	4.03	7.65	2.26
query23	18.32	1.36	1.29
query24	1.40	0.37	0.24
query25	0.13	0.09	0.08
query26	0.27	0.17	0.17
query27	0.08	0.09	0.08
query28	13.34	1.01	1.01
query29	13.22	3.27	3.30
query30	0.24	0.05	0.06
query31	2.86	0.40	0.39
query32	3.27	0.47	0.47
query33	2.85	2.96	2.89
query34	17.24	4.38	4.40
query35	4.44	4.48	4.46
query36	0.64	0.45	0.45
query37	0.18	0.16	0.17
query38	0.15	0.15	0.14
query39	0.04	0.04	0.03
query40	0.17	0.14	0.14
query41	0.09	0.05	0.05
query42	0.06	0.05	0.04
query43	0.04	0.04	0.04
Total cold run time: 109.39 s
Total hot run time: 30.78 s

doris-robot avatar Jun 03 '24 03:06 doris-robot

run p0

Johnnyssc avatar Jun 03 '24 08:06 Johnnyssc

run buildall

Johnnyssc avatar Jun 03 '24 09:06 Johnnyssc

run buildall

Johnnyssc avatar Jun 04 '24 01:06 Johnnyssc

run p0

Johnnyssc avatar Jun 04 '24 02:06 Johnnyssc

TPC-H: Total hot run time: 41186 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 42d6679bb3da5f43165fb75dd9738a7a78414948, data reload: false

------ Round 1 ----------------------------------
q1	17594	4488	4279	4279
q2	2021	200	204	200
q3	10422	1245	1128	1128
q4	10200	835	788	788
q5	7496	2720	2771	2720
q6	225	137	134	134
q7	972	632	608	608
q8	9216	2165	2138	2138
q9	9548	6747	6756	6747
q10	9540	3940	3816	3816
q11	463	239	243	239
q12	465	239	247	239
q13	17422	3307	3214	3214
q14	252	220	219	219
q15	521	463	481	463
q16	518	409	399	399
q17	1006	652	616	616
q18	8564	7900	7784	7784
q19	4221	1427	1396	1396
q20	661	317	328	317
q21	5199	3403	4053	3403
q22	406	339	354	339
Total cold run time: 116932 ms
Total hot run time: 41186 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4528	4484	4429	4429
q2	395	266	283	266
q3	3200	2994	2945	2945
q4	1887	1597	1615	1597
q5	5482	5499	5501	5499
q6	229	127	125	125
q7	2228	1822	1853	1822
q8	3265	3422	3374	3374
q9	8714	8608	8724	8608
q10	4037	3743	3672	3672
q11	592	482	499	482
q12	817	628	639	628
q13	16524	3121	3185	3121
q14	288	270	276	270
q15	508	475	483	475
q16	481	450	435	435
q17	1828	1522	1474	1474
q18	8159	7503	7438	7438
q19	1742	1495	1573	1495
q20	3016	1776	1763	1763
q21	9211	4730	4607	4607
q22	627	547	552	547
Total cold run time: 77758 ms
Total hot run time: 55072 ms

doris-robot avatar Jun 04 '24 03:06 doris-robot

TPC-DS: Total hot run time: 170237 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 42d6679bb3da5f43165fb75dd9738a7a78414948, data reload: false

query1	919	376	371	371
query2	6477	2392	2406	2392
query3	6645	203	213	203
query4	19848	17158	17207	17158
query5	4162	450	466	450
query6	257	159	152	152
query7	4612	296	285	285
query8	316	289	287	287
query9	8507	2391	2379	2379
query10	446	309	315	309
query11	10766	10088	10048	10048
query12	132	90	86	86
query13	1649	363	354	354
query14	9352	7603	7192	7192
query15	233	188	189	188
query16	7330	267	268	267
query17	1332	528	507	507
query18	1924	283	268	268
query19	200	149	153	149
query20	93	87	84	84
query21	207	133	124	124
query22	4233	4035	4072	4035
query23	33786	33165	32848	32848
query24	11282	2856	2851	2851
query25	620	353	357	353
query26	1226	151	149	149
query27	2809	322	331	322
query28	7242	2082	2067	2067
query29	909	611	597	597
query30	271	149	149	149
query31	952	751	733	733
query32	91	52	53	52
query33	760	283	275	275
query34	981	467	471	467
query35	745	626	634	626
query36	1116	950	929	929
query37	152	70	72	70
query38	2881	2768	2742	2742
query39	864	784	777	777
query40	216	128	126	126
query41	56	53	59	53
query42	122	104	101	101
query43	604	545	562	545
query44	1244	759	746	746
query45	203	162	168	162
query46	1072	730	728	728
query47	1853	1784	1767	1767
query48	373	296	300	296
query49	1065	424	411	411
query50	781	384	397	384
query51	6997	6834	6785	6785
query52	101	91	95	91
query53	355	291	288	288
query54	868	467	443	443
query55	77	72	71	71
query56	288	256	264	256
query57	1115	1056	1070	1056
query58	257	267	266	266
query59	3497	3256	3190	3190
query60	315	288	268	268
query61	93	86	83	83
query62	647	438	454	438
query63	313	290	281	281
query64	8888	2203	1672	1672
query65	3230	3117	3145	3117
query66	916	329	335	329
query67	15303	14818	14942	14818
query68	4520	550	518	518
query69	464	299	299	299
query70	1094	1091	1153	1091
query71	386	286	284	284
query72	7101	5537	2688	2688
query73	748	318	325	318
query74	5906	5507	5527	5507
query75	3400	2671	2702	2671
query76	2257	975	942	942
query77	499	316	305	305
query78	10240	9838	9766	9766
query79	2210	529	530	529
query80	1203	514	479	479
query81	593	228	225	225
query82	1055	105	109	105
query83	251	182	178	178
query84	244	94	87	87
query85	1213	332	314	314
query86	449	316	328	316
query87	3282	3068	3046	3046
query88	3401	2358	2349	2349
query89	472	389	384	384
query90	1748	198	198	198
query91	136	109	110	109
query92	66	53	52	52
query93	2010	522	510	510
query94	1244	205	202	202
query95	411	334	327	327
query96	592	271	277	271
query97	3167	3049	3042	3042
query98	233	223	216	216
query99	1360	843	846	843
Total cold run time: 269131 ms
Total hot run time: 170237 ms

doris-robot avatar Jun 04 '24 03:06 doris-robot

ClickBench: Total hot run time: 30.99 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 42d6679bb3da5f43165fb75dd9738a7a78414948, data reload: false

query1	0.04	0.03	0.04
query2	0.08	0.04	0.04
query3	0.23	0.06	0.05
query4	1.66	0.09	0.09
query5	0.51	0.48	0.49
query6	1.12	0.72	0.72
query7	0.02	0.02	0.01
query8	0.05	0.04	0.04
query9	0.53	0.49	0.50
query10	0.55	0.56	0.54
query11	0.15	0.11	0.11
query12	0.15	0.12	0.12
query13	0.59	0.58	0.62
query14	0.76	0.78	0.78
query15	0.83	0.80	0.81
query16	0.37	0.37	0.36
query17	0.99	0.99	1.03
query18	0.22	0.25	0.25
query19	1.76	1.76	1.71
query20	0.02	0.01	0.01
query21	15.46	0.72	0.68
query22	4.28	7.46	2.21
query23	18.27	1.39	1.18
query24	1.50	0.31	0.27
query25	0.15	0.08	0.08
query26	0.27	0.18	0.18
query27	0.09	0.08	0.08
query28	13.25	1.01	1.01
query29	13.00	3.39	3.34
query30	0.24	0.06	0.06
query31	2.89	0.40	0.39
query32	3.25	0.47	0.48
query33	2.85	2.89	2.89
query34	17.10	4.40	4.39
query35	4.47	4.50	4.52
query36	0.69	0.47	0.46
query37	0.19	0.16	0.15
query38	0.16	0.15	0.15
query39	0.04	0.04	0.04
query40	0.17	0.14	0.15
query41	0.09	0.06	0.04
query42	0.05	0.04	0.05
query43	0.04	0.04	0.04
Total cold run time: 109.13 s
Total hot run time: 30.99 s

doris-robot avatar Jun 04 '24 03:06 doris-robot

run p0

Johnnyssc avatar Jun 04 '24 07:06 Johnnyssc

run buildall

Johnnyssc avatar Jun 04 '24 10:06 Johnnyssc

TPC-H: Total hot run time: 41011 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 6c499d49db655d0746b33639857fa3e62e2f6e80, data reload: false

------ Round 1 ----------------------------------
q1	17655	4381	4254	4254
q2	2030	195	201	195
q3	10437	1198	1233	1198
q4	10198	815	763	763
q5	7504	2697	2850	2697
q6	224	139	133	133
q7	986	632	624	624
q8	9230	2183	2098	2098
q9	9139	6689	6770	6689
q10	9453	3915	3922	3915
q11	460	240	249	240
q12	523	243	233	233
q13	17883	3244	3267	3244
q14	259	214	220	214
q15	516	469	481	469
q16	512	406	393	393
q17	982	739	616	616
q18	8286	7802	7731	7731
q19	2986	1413	1419	1413
q20	657	315	328	315
q21	5255	3230	4159	3230
q22	414	351	347	347
Total cold run time: 115589 ms
Total hot run time: 41011 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4510	4462	4406	4406
q2	378	281	273	273
q3	3163	2911	2917	2911
q4	2003	1567	1586	1567
q5	5383	5485	5501	5485
q6	222	125	126	125
q7	2181	1837	1752	1752
q8	3220	3368	3419	3368
q9	8737	8562	8631	8562
q10	4045	3862	3791	3791
q11	569	521	485	485
q12	779	600	609	600
q13	16712	3142	3145	3142
q14	303	287	278	278
q15	540	484	479	479
q16	485	447	427	427
q17	1809	1510	1504	1504
q18	8086	7616	7411	7411
q19	1740	1563	1431	1431
q20	3027	1795	1825	1795
q21	10454	4653	4729	4653
q22	711	577	539	539
Total cold run time: 79057 ms
Total hot run time: 54984 ms

doris-robot avatar Jun 04 '24 11:06 doris-robot

TPC-DS: Total hot run time: 171353 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 6c499d49db655d0746b33639857fa3e62e2f6e80, data reload: false

query1	925	377	365	365
query2	6470	2546	2406	2406
query3	6644	210	213	210
query4	19191	17296	17152	17152
query5	4110	447	458	447
query6	248	162	152	152
query7	4588	322	291	291
query8	320	293	276	276
query9	8633	2459	2503	2459
query10	441	295	283	283
query11	10391	9913	10059	9913
query12	136	98	91	91
query13	1681	376	374	374
query14	10039	6450	6116	6116
query15	226	189	184	184
query16	7154	282	273	273
query17	992	515	514	514
query18	1906	269	262	262
query19	206	158	148	148
query20	92	83	90	83
query21	200	127	130	127
query22	4301	3937	3967	3937
query23	33688	33038	32822	32822
query24	11215	2799	2886	2799
query25	645	345	354	345
query26	1619	161	154	154
query27	3091	319	316	316
query28	7661	2096	2083	2083
query29	1147	626	600	600
query30	286	149	147	147
query31	951	748	747	747
query32	97	51	55	51
query33	752	282	271	271
query34	981	486	475	475
query35	731	611	600	600
query36	1112	944	910	910
query37	166	69	68	68
query38	2869	2734	2718	2718
query39	890	798	796	796
query40	288	123	121	121
query41	54	53	51	51
query42	117	95	100	95
query43	586	603	567	567
query44	1150	731	739	731
query45	200	162	163	162
query46	1080	705	726	705
query47	1856	1748	1758	1748
query48	368	297	303	297
query49	1192	403	409	403
query50	774	395	390	390
query51	6896	6735	6824	6735
query52	104	89	90	89
query53	349	290	296	290
query54	847	453	445	445
query55	81	74	75	74
query56	274	255	261	255
query57	1129	1053	1060	1053
query58	258	238	238	238
query59	3324	3287	3290	3287
query60	304	263	272	263
query61	89	88	89	88
query62	645	444	459	444
query63	315	284	287	284
query64	9945	2186	1738	1738
query65	3175	3091	3114	3091
query66	1470	314	317	314
query67	15200	14935	14727	14727
query68	4528	542	531	531
query69	459	317	320	317
query70	1154	1149	1117	1117
query71	423	287	291	287
query72	7314	5745	5257	5257
query73	749	329	333	329
query74	5938	5473	5553	5473
query75	3328	2695	2680	2680
query76	2450	974	937	937
query77	458	305	304	304
query78	10275	9870	9673	9673
query79	2773	514	515	514
query80	2199	490	470	470
query81	557	222	222	222
query82	1405	113	101	101
query83	323	183	178	178
query84	271	93	94	93
query85	1525	327	311	311
query86	481	311	301	301
query87	3307	3067	3053	3053
query88	4208	2459	2440	2440
query89	478	385	385	385
query90	1826	198	192	192
query91	135	107	107	107
query92	64	51	53	51
query93	3624	522	506	506
query94	1243	203	198	198
query95	413	326	332	326
query96	605	276	274	274
query97	3199	3039	3013	3013
query98	255	230	220	220
query99	1213	854	843	843
Total cold run time: 276045 ms
Total hot run time: 171353 ms

doris-robot avatar Jun 04 '24 11:06 doris-robot