Skip to content

Conversation

@zhiqiang-hhhh
Copy link
Contributor

cherry pick from #41559

@zhiqiang-hhhh
Copy link
Contributor Author

run buildall

@doris-robot
Copy link

Thank you for your contribution to Apache Doris.
Don't know what should be done next? See How to process your PR

Since 2024-03-18, the Document has been moved to doris-website.
See Doris Document.

@zhiqiang-hhhh
Copy link
Contributor Author

run buildall

@zhiqiang-hhhh zhiqiang-hhhh force-pushed the pick_41559_to_upstream_branch-3.0 branch from 67c1a72 to cbf0266 Compare November 11, 2024 03:18
@zhiqiang-hhhh
Copy link
Contributor Author

run buildall

@github-actions
Copy link
Contributor

clang-tidy review says "All clean, LGTM! 👍"

@zhiqiang-hhhh
Copy link
Contributor Author

run buildall

@github-actions
Copy link
Contributor

clang-tidy review says "All clean, LGTM! 👍"

@doris-robot
Copy link

TPC-H: Total hot run time: 40397 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit f1790a5bebfd1af35ea4cbc209ec9be680cd5ac7, data reload: false

------ Round 1 ----------------------------------
q1	17981	9808	7291	7291
q2	2106	191	171	171
q3	10588	1111	1151	1111
q4	10399	736	718	718
q5	7725	2776	2811	2776
q6	240	150	142	142
q7	968	610	616	610
q8	9388	1909	1959	1909
q9	6633	6418	6392	6392
q10	7088	2288	2296	2288
q11	455	255	257	255
q12	382	205	202	202
q13	17792	3004	2991	2991
q14	233	205	216	205
q15	576	525	515	515
q16	690	604	602	602
q17	992	505	562	505
q18	7379	6608	6477	6477
q19	2036	1070	991	991
q20	454	196	205	196
q21	3868	3155	3087	3087
q22	1084	963	982	963
Total cold run time: 109057 ms
Total hot run time: 40397 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7308	7234	7271	7234
q2	390	314	318	314
q3	2999	2866	2897	2866
q4	2074	1689	1774	1689
q5	5662	5703	5708	5703
q6	229	137	140	137
q7	2184	1732	1746	1732
q8	3363	3488	3365	3365
q9	8904	8842	8753	8753
q10	3516	3502	3520	3502
q11	592	497	493	493
q12	807	608	594	594
q13	16650	3149	3147	3147
q14	306	264	292	264
q15	605	555	553	553
q16	739	661	663	661
q17	1830	1603	1572	1572
q18	8256	7727	7674	7674
q19	1737	1508	1669	1508
q20	2044	1841	1849	1841
q21	5312	5349	5251	5251
q22	1076	1027	1042	1027
Total cold run time: 76583 ms
Total hot run time: 59880 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 193287 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit f1790a5bebfd1af35ea4cbc209ec9be680cd5ac7, data reload: false

query1	2442	2135	2272	2135
query2	6235	2077	1982	1982
query3	14510	10172	236	236
query4	34249	23526	23512	23512
query5	5544	441	444	441
query6	352	173	186	173
query7	5123	303	312	303
query8	320	238	237	237
query9	9554	2667	2660	2660
query10	554	256	271	256
query11	18236	15113	15100	15100
query12	150	102	103	102
query13	1551	423	412	412
query14	11132	7017	6858	6858
query15	225	185	185	185
query16	7786	501	509	501
query17	1367	593	581	581
query18	2346	614	634	614
query19	244	203	180	180
query20	117	112	113	112
query21	204	104	107	104
query22	4769	4274	4222	4222
query23	34496	33786	33954	33786
query24	6749	3410	3392	3392
query25	569	432	419	419
query26	750	190	187	187
query27	1743	301	311	301
query28	4230	2506	2493	2493
query29	741	448	442	442
query30	368	313	307	307
query31	990	803	818	803
query32	75	56	54	54
query33	502	283	284	283
query34	887	492	508	492
query35	826	741	706	706
query36	1055	943	923	923
query37	122	76	72	72
query38	3918	3749	3805	3749
query39	1455	1433	1434	1433
query40	197	103	102	102
query41	53	53	51	51
query42	108	102	98	98
query43	522	486	490	486
query44	1141	783	782	782
query45	183	168	165	165
query46	1132	716	728	716
query47	1931	1826	1837	1826
query48	452	375	379	375
query49	759	401	403	401
query50	815	409	409	409
query51	7155	7157	7163	7157
query52	109	91	94	91
query53	256	185	181	181
query54	585	431	441	431
query55	77	76	77	76
query56	261	226	220	220
query57	1196	1095	1106	1095
query58	218	208	206	206
query59	3102	3039	2958	2958
query60	280	250	246	246
query61	108	105	109	105
query62	796	665	659	659
query63	208	187	185	185
query64	3083	648	615	615
query65	3239	3168	3181	3168
query66	749	332	311	311
query67	15889	15239	15255	15239
query68	4550	555	558	555
query69	422	256	256	256
query70	1146	1101	1118	1101
query71	357	251	243	243
query72	6376	3959	3962	3959
query73	752	337	350	337
query74	10224	8946	8904	8904
query75	3346	2651	2615	2615
query76	2365	1037	1018	1018
query77	428	266	271	266
query78	10559	9568	9531	9531
query79	8270	607	588	588
query80	2140	423	419	419
query81	570	243	248	243
query82	1110	109	112	109
query83	289	158	153	153
query84	288	86	76	76
query85	1589	295	290	290
query86	484	295	307	295
query87	4402	4200	4254	4200
query88	5697	2391	2393	2391
query89	580	289	288	288
query90	2268	182	184	182
query91	178	145	163	145
query92	72	48	49	48
query93	7886	540	546	540
query94	908	279	277	277
query95	334	245	245	245
query96	631	295	288	288
query97	3392	3247	3129	3129
query98	218	203	201	201
query99	1611	1297	1293	1293
Total cold run time: 314532 ms
Total hot run time: 193287 ms

@zhiqiang-hhhh
Copy link
Contributor Author

run buildall

@zhiqiang-hhhh zhiqiang-hhhh force-pushed the pick_41559_to_upstream_branch-3.0 branch from f1790a5 to 9e4fc9d Compare January 1, 2025 12:47
@zhiqiang-hhhh
Copy link
Contributor Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 41137 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 9e4fc9dbee898afd1a74122417a42276f3fcd1ca, data reload: false

------ Round 1 ----------------------------------
q1	17748	7520	7243	7243
q2	2051	172	167	167
q3	10660	1096	1195	1096
q4	10571	728	749	728
q5	7749	2909	2853	2853
q6	238	152	146	146
q7	1000	615	615	615
q8	9375	2033	2042	2033
q9	6628	6459	6452	6452
q10	7034	2301	2343	2301
q11	460	257	256	256
q12	411	215	208	208
q13	17797	3019	3008	3008
q14	232	211	210	210
q15	575	521	539	521
q16	699	609	607	607
q17	993	523	546	523
q18	7523	6673	6717	6673
q19	1388	1117	1080	1080
q20	483	199	191	191
q21	4102	3328	3226	3226
q22	1120	1000	1001	1000
Total cold run time: 108837 ms
Total hot run time: 41137 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7247	7206	7228	7206
q2	325	233	229	229
q3	3057	2963	2965	2963
q4	2067	1829	1739	1739
q5	5709	5789	5771	5771
q6	221	148	143	143
q7	2294	1834	1822	1822
q8	3401	3551	3412	3412
q9	8842	8910	8855	8855
q10	3579	3586	3574	3574
q11	600	517	510	510
q12	855	637	619	619
q13	9297	3159	3166	3159
q14	301	262	278	262
q15	573	516	523	516
q16	704	664	678	664
q17	1837	1624	1601	1601
q18	8239	7748	7722	7722
q19	1704	1636	1588	1588
q20	2154	1858	1887	1858
q21	5576	5407	5465	5407
q22	1163	1035	1012	1012
Total cold run time: 69745 ms
Total hot run time: 60632 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 198392 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 9e4fc9dbee898afd1a74122417a42276f3fcd1ca, data reload: false

query1	1278	954	939	939
query2	6229	1989	2026	1989
query3	10863	4321	4385	4321
query4	66162	28930	23593	23593
query5	4990	451	466	451
query6	418	183	180	180
query7	5577	313	314	313
query8	318	223	230	223
query9	8863	2737	2734	2734
query10	468	271	258	258
query11	17232	15278	15968	15278
query12	159	107	99	99
query13	1470	453	439	439
query14	9804	7561	7378	7378
query15	208	186	186	186
query16	6739	490	486	486
query17	1108	586	584	584
query18	1781	323	335	323
query19	222	161	154	154
query20	119	112	113	112
query21	64	48	51	48
query22	4617	4751	4473	4473
query23	34412	34297	34485	34297
query24	6295	2826	2880	2826
query25	507	389	418	389
query26	653	173	166	166
query27	1750	302	304	302
query28	4646	2529	2491	2491
query29	703	466	445	445
query30	244	166	172	166
query31	975	819	828	819
query32	62	56	57	56
query33	396	273	288	273
query34	935	522	503	503
query35	868	737	738	737
query36	1090	970	970	970
query37	124	81	77	77
query38	4112	4036	4113	4036
query39	1492	1523	1473	1473
query40	138	82	85	82
query41	49	49	48	48
query42	110	97	96	96
query43	545	494	514	494
query44	1197	860	854	854
query45	184	166	168	166
query46	1143	734	734	734
query47	2019	1935	1930	1930
query48	493	376	382	376
query49	757	392	404	392
query50	817	438	428	428
query51	7525	7423	7162	7162
query52	99	83	86	83
query53	253	179	179	179
query54	571	442	453	442
query55	80	72	78	72
query56	258	234	246	234
query57	1253	1098	1147	1098
query58	208	195	206	195
query59	3105	2923	2891	2891
query60	283	249	237	237
query61	108	108	107	107
query62	802	662	665	662
query63	219	189	195	189
query64	1442	674	669	669
query65	3269	3196	3199	3196
query66	750	303	319	303
query67	15920	15836	15685	15685
query68	3598	612	599	599
query69	433	268	257	257
query70	1204	1143	1081	1081
query71	358	247	252	247
query72	6261	4069	4046	4046
query73	744	350	354	350
query74	9952	8966	9060	8966
query75	3387	2690	2633	2633
query76	1782	1010	1069	1010
query77	510	277	281	277
query78	10533	9599	9628	9599
query79	1180	604	603	603
query80	759	439	434	434
query81	508	251	240	240
query82	1223	122	112	112
query83	164	152	151	151
query84	283	80	76	76
query85	817	307	294	294
query86	327	287	283	283
query87	4494	4367	4367	4367
query88	3582	2429	2415	2415
query89	419	285	287	285
query90	2020	190	190	190
query91	180	150	146	146
query92	64	47	48	47
query93	1214	558	553	553
query94	760	298	300	298
query95	353	253	256	253
query96	671	279	287	279
query97	3310	3229	3223	3223
query98	213	193	200	193
query99	1594	1298	1294	1294
Total cold run time: 314447 ms
Total hot run time: 198392 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 33.51 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 9e4fc9dbee898afd1a74122417a42276f3fcd1ca, data reload: false

query1	0.03	0.03	0.03
query2	0.08	0.05	0.04
query3	0.24	0.06	0.06
query4	1.64	0.08	0.08
query5	0.52	0.50	0.52
query6	1.12	0.74	0.74
query7	0.02	0.01	0.01
query8	0.06	0.07	0.05
query9	0.55	0.49	0.50
query10	0.56	0.55	0.54
query11	0.17	0.12	0.12
query12	0.17	0.13	0.13
query13	0.62	0.59	0.59
query14	2.93	3.06	3.09
query15	0.90	0.84	0.83
query16	0.40	0.37	0.38
query17	1.05	1.05	1.06
query18	0.18	0.19	0.19
query19	1.94	1.91	1.89
query20	0.02	0.01	0.01
query21	15.36	0.66	0.65
query22	3.42	8.42	1.75
query23	18.24	1.41	1.30
query24	2.24	0.24	0.23
query25	0.14	0.09	0.08
query26	0.27	0.18	0.17
query27	0.09	0.08	0.08
query28	13.23	1.16	1.12
query29	12.66	3.35	3.32
query30	0.24	0.07	0.05
query31	2.84	0.41	0.41
query32	3.22	0.47	0.49
query33	3.01	3.03	3.06
query34	16.75	4.51	4.44
query35	4.63	4.55	4.55
query36	0.66	0.50	0.47
query37	0.20	0.17	0.16
query38	0.17	0.15	0.16
query39	0.05	0.04	0.04
query40	0.17	0.12	0.13
query41	0.09	0.06	0.05
query42	0.06	0.05	0.06
query43	0.05	0.05	0.04
Total cold run time: 110.99 s
Total hot run time: 33.51 s

@zhiqiang-hhhh
Copy link
Contributor Author

run p0

@zhiqiang-hhhh
Copy link
Contributor Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 41426 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit d820b8224776a927bab8e7ea71d7881c23cd4958, data reload: false

------ Round 1 ----------------------------------
q1	17635	7656	7432	7432
q2	2057	184	173	173
q3	10825	1108	1246	1108
q4	10406	777	801	777
q5	7763	2911	2828	2828
q6	244	149	144	144
q7	997	614	619	614
q8	9375	2035	2082	2035
q9	6615	6452	6457	6452
q10	7053	2328	2345	2328
q11	471	270	261	261
q12	429	211	213	211
q13	17796	2973	2989	2973
q14	237	209	205	205
q15	571	511	527	511
q16	692	605	604	604
q17	1026	590	599	590
q18	7259	6758	6713	6713
q19	1383	1049	1066	1049
q20	465	211	198	198
q21	4073	3237	3279	3237
q22	1130	983	1002	983
Total cold run time: 108502 ms
Total hot run time: 41426 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7471	7395	7355	7355
q2	325	240	231	231
q3	3022	2975	2915	2915
q4	2079	1849	1758	1758
q5	5773	5750	5811	5750
q6	254	145	149	145
q7	2256	1836	1811	1811
q8	3406	3575	3461	3461
q9	8961	9021	8917	8917
q10	3609	3593	3541	3541
q11	604	486	500	486
q12	836	642	631	631
q13	11260	3155	3173	3155
q14	300	265	276	265
q15	564	516	525	516
q16	707	672	687	672
q17	1859	1637	1626	1626
q18	8429	7830	7581	7581
q19	1768	1669	1529	1529
q20	2111	1897	1893	1893
q21	5753	5451	5259	5259
q22	1169	1063	1055	1055
Total cold run time: 72516 ms
Total hot run time: 60552 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 197335 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit d820b8224776a927bab8e7ea71d7881c23cd4958, data reload: false

query1	1269	943	949	943
query2	6244	2080	1996	1996
query3	10998	4495	4286	4286
query4	66328	28482	23463	23463
query5	5065	457	456	456
query6	429	186	174	174
query7	5618	309	312	309
query8	310	231	233	231
query9	8990	2706	2711	2706
query10	471	272	261	261
query11	17221	15199	15834	15199
query12	154	101	107	101
query13	1511	443	420	420
query14	10403	7166	7466	7166
query15	202	172	180	172
query16	7060	485	496	485
query17	1102	586	579	579
query18	1838	326	335	326
query19	205	159	155	155
query20	119	115	110	110
query21	66	47	46	46
query22	4636	4583	4493	4493
query23	34599	34164	34320	34164
query24	6104	2845	2925	2845
query25	511	397	399	397
query26	645	177	169	169
query27	2033	310	308	308
query28	4129	2523	2495	2495
query29	677	462	444	444
query30	250	164	160	160
query31	1006	806	856	806
query32	66	52	59	52
query33	469	301	286	286
query34	897	502	504	502
query35	843	718	753	718
query36	1109	949	956	949
query37	123	71	72	71
query38	4107	4141	4137	4137
query39	1503	1516	1468	1468
query40	136	80	88	80
query41	50	47	48	47
query42	110	99	100	99
query43	518	490	483	483
query44	1152	829	845	829
query45	184	169	164	164
query46	1170	736	712	712
query47	2008	1960	1940	1940
query48	474	381	383	381
query49	705	390	394	390
query50	823	427	428	427
query51	7229	7178	7155	7155
query52	99	88	83	83
query53	252	181	179	179
query54	543	440	451	440
query55	75	69	74	69
query56	262	242	242	242
query57	1248	1129	1119	1119
query58	204	197	198	197
query59	3210	3001	3040	3001
query60	277	256	267	256
query61	110	106	112	106
query62	772	675	656	656
query63	212	190	199	190
query64	1383	670	640	640
query65	3243	3244	3208	3208
query66	633	297	319	297
query67	15901	15642	15524	15524
query68	3661	581	568	568
query69	433	266	260	260
query70	1179	1160	1126	1126
query71	322	256	251	251
query72	6545	3995	3900	3900
query73	747	345	340	340
query74	10065	8935	9061	8935
query75	3309	2649	2693	2649
query76	1895	1064	1138	1064
query77	463	270	269	269
query78	10552	9621	9527	9527
query79	1308	598	597	597
query80	860	418	419	418
query81	492	241	238	238
query82	1281	118	115	115
query83	164	138	141	138
query84	281	79	75	75
query85	853	291	282	282
query86	324	296	292	292
query87	4426	4284	4334	4284
query88	3705	2389	2347	2347
query89	405	294	283	283
query90	2013	178	183	178
query91	185	151	149	149
query92	68	51	48	48
query93	1451	549	541	541
query94	771	313	295	295
query95	354	250	255	250
query96	605	279	275	275
query97	3278	3218	3210	3210
query98	216	199	195	195
query99	1575	1274	1423	1274
Total cold run time: 316079 ms
Total hot run time: 197335 ms

@yiguolei yiguolei merged commit b4c36d3 into apache:branch-3.0 Jan 3, 2025
18 of 20 checks passed
@zhiqiang-hhhh zhiqiang-hhhh deleted the pick_41559_to_upstream_branch-3.0 branch January 3, 2025 09:30
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

3 participants