doris
doris copied to clipboard
apache
[BugFix](StoragePolicy) fix modify partition's storage policy with different resource issue succeed with execption
Proposed changes
Issue Number: close #34229
when we try to modify a partition's storage policy which have different resource with the previous one, we get error message "currently do not support change origin storage policy to another one with different resource", but the modification same also succeed!
expect: the modification fail with "currently do not support change origin storage policy to another one with different resource".
Further comments
If this is a relatively large or complex change, kick off the discussion at [email protected] by explaining why you chose the solution you did and what alternatives you considered, etc...
Thank you for your contribution to Apache Doris. Don't know what should be done next? See How to process your PR
Since 2024-03-18, the Document has been moved to doris-website. See Doris Document.
TPC-H: Total hot run time: 49815 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 5caada9aa65bab58e15e234b3cb4f77d5a7a3667, data reload: false
------ Round 1 ----------------------------------
q1 17675 4429 4389 4389
q2 2049 155 149 149
q3 10471 1866 1921 1866
q4 10369 1238 1325 1238
q5 9136 3911 3956 3911
q6 237 124 127 124
q7 2039 1586 1608 1586
q8 9359 2749 2721 2721
q9 10634 10222 10285 10222
q10 8603 3563 3459 3459
q11 419 244 251 244
q12 471 301 304 301
q13 18360 4022 4018 4018
q14 359 327 326 326
q15 518 453 459 453
q16 697 587 568 568
q17 1141 958 969 958
q18 7232 6938 6962 6938
q19 1708 1611 1547 1547
q20 522 303 307 303
q21 4418 4099 4157 4099
q22 492 398 395 395
Total cold run time: 116909 ms
Total hot run time: 49815 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4326 4382 4311 4311
q2 326 225 216 216
q3 4169 4227 4143 4143
q4 2738 2747 2743 2743
q5 7218 7138 7097 7097
q6 240 123 119 119
q7 3203 2825 2818 2818
q8 4415 4466 4508 4466
q9 16862 16894 16792 16792
q10 4249 4264 4235 4235
q11 751 707 695 695
q12 1028 874 867 867
q13 6772 3786 3754 3754
q14 462 418 423 418
q15 499 462 456 456
q16 749 688 681 681
q17 3758 3827 3886 3827
q18 8846 8847 8726 8726
q19 1711 1725 1671 1671
q20 2363 2184 2108 2108
q21 8592 8461 8511 8461
q22 1060 931 924 924
Total cold run time: 84337 ms
Total hot run time: 79528 ms
TPC-DS: Total hot run time: 203214 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 5caada9aa65bab58e15e234b3cb4f77d5a7a3667, data reload: false
query1 922 387 373 373
query2 6544 2864 2769 2769
query3 6922 211 209 209
query4 19992 17954 18104 17954
query5 19727 6561 6512 6512
query6 281 220 233 220
query7 4167 305 301 301
query8 259 251 248 248
query9 3149 2715 2627 2627
query10 419 297 293 293
query11 11283 10552 10678 10552
query12 129 81 74 74
query13 5590 700 675 675
query14 17524 13618 13390 13390
query15 353 216 228 216
query16 6480 269 260 260
query17 1710 1462 869 869
query18 2343 401 405 401
query19 206 151 151 151
query20 77 80 81 80
query21 189 93 100 93
query22 5217 5104 5003 5003
query23 32806 32082 32169 32082
query24 7020 6480 6528 6480
query25 508 441 433 433
query26 524 163 158 158
query27 1865 294 293 293
query28 6114 2370 2301 2301
query29 2830 2671 2798 2671
query30 240 164 166 164
query31 893 750 752 750
query32 70 64 60 60
query33 393 262 255 255
query34 839 475 479 475
query35 1142 958 907 907
query36 1404 1172 1181 1172
query37 89 61 59 59
query38 3090 2923 2947 2923
query39 1377 1330 1331 1330
query40 201 99 95 95
query41 38 41 33 33
query42 86 81 83 81
query43 718 742 797 742
query44 1130 719 725 719
query45 244 247 231 231
query46 1238 966 966 966
query47 1774 1826 1766 1766
query48 996 729 692 692
query49 621 364 370 364
query50 870 615 590 590
query51 4775 4697 4681 4681
query52 92 82 75 75
query53 449 309 315 309
query54 2666 2459 2520 2459
query55 84 85 79 79
query56 237 207 205 205
query57 1263 1140 1264 1140
query58 234 195 205 195
query59 4234 4180 4072 4072
query60 214 205 206 205
query61 92 86 85 85
query62 790 486 517 486
query63 479 340 340 340
query64 2455 1526 1390 1390
query65 3710 3546 3556 3546
query66 759 366 388 366
query67 17445 14973 15126 14973
query68 8302 645 682 645
query69 563 353 369 353
query70 1680 1442 1309 1309
query71 380 311 319 311
query72 6392 3410 3442 3410
query73 729 332 331 331
query74 6340 5861 5895 5861
query75 4436 3643 3774 3643
query76 4736 1133 1224 1133
query77 621 251 269 251
query78 12602 11698 11520 11520
query79 9315 646 664 646
query80 2356 404 397 397
query81 509 233 229 229
query82 1747 106 99 99
query83 171 138 136 136
query84 254 68 71 68
query85 1087 308 296 296
query86 344 308 296 296
query87 3259 3006 3024 3006
query88 5266 2377 2388 2377
query89 401 308 311 308
query90 1776 220 217 217
query91 174 138 139 138
query92 58 57 57 57
query93 6487 558 557 557
query94 756 205 210 205
query95 1125 1060 1060 1060
query96 647 344 324 324
query97 6502 6391 6490 6391
query98 194 181 161 161
query99 3013 927 811 811
Total cold run time: 314803 ms
Total hot run time: 203214 ms
ClickBench: Total hot run time: 31.01 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 5caada9aa65bab58e15e234b3cb4f77d5a7a3667, data reload: false
query1 0.02 0.02 0.03
query2 0.06 0.03 0.02
query3 0.24 0.04 0.04
query4 1.79 0.06 0.05
query5 0.53 0.53 0.52
query6 1.24 0.62 0.60
query7 0.01 0.01 0.01
query8 0.04 0.02 0.03
query9 0.52 0.48 0.47
query10 0.53 0.54 0.54
query11 0.12 0.08 0.09
query12 0.11 0.09 0.09
query13 0.62 0.61 0.61
query14 0.78 0.79 0.77
query15 0.79 0.75 0.76
query16 0.37 0.37 0.36
query17 0.99 1.00 1.01
query18 0.22 0.26 0.24
query19 1.84 1.86 1.85
query20 0.01 0.01 0.01
query21 15.48 0.61 0.58
query22 1.95 1.98 1.49
query23 17.51 1.05 1.01
query24 4.82 1.26 1.79
query25 0.41 0.11 0.04
query26 0.65 0.15 0.15
query27 0.05 0.04 0.03
query28 7.25 0.72 0.74
query29 12.63 2.32 2.35
query30 0.61 0.53 0.52
query31 2.82 0.38 0.37
query32 3.38 0.51 0.50
query33 3.08 3.07 3.10
query34 15.26 4.80 4.79
query35 4.87 4.86 4.86
query36 1.08 1.01 1.02
query37 0.06 0.04 0.05
query38 0.03 0.02 0.02
query39 0.02 0.02 0.01
query40 0.16 0.14 0.14
query41 0.06 0.02 0.01
query42 0.02 0.01 0.02
query43 0.02 0.01 0.02
Total cold run time: 103.05 s
Total hot run time: 31.01 s
Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
Load test result on commit 5caada9aa65bab58e15e234b3cb4f77d5a7a3667 with default session variables
Stream load json: 20 seconds loaded 2358488459 Bytes, about 112 MB/s
Stream load orc: 58 seconds loaded 1101869774 Bytes, about 18 MB/s
Stream load parquet: 31 seconds loaded 861443392 Bytes, about 26 MB/s
Insert into select: 22.0 seconds inserted 10000000 Rows, about 454K ops/s
@Johnnyssc pls add testcase
@xiaokang thx for reminding，the regression test case has already passed in local env and added in the latest commit
TPC-H: Total hot run time: 50156 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 2f52593d1c0307197ad7261126a446f2a27940c5, data reload: false
------ Round 1 ----------------------------------
q1 18506 4332 4356 4332
q2 2034 190 148 148
q3 10233 1897 1923 1897
q4 10452 1280 1334 1280
q5 8430 3937 3929 3929
q6 240 129 128 128
q7 2101 1621 1626 1621
q8 9362 2754 2725 2725
q9 10658 10453 10222 10222
q10 8662 3614 3743 3614
q11 431 245 262 245
q12 494 312 316 312
q13 18527 4060 4179 4060
q14 363 350 368 350
q15 525 473 488 473
q16 1065 631 637 631
q17 1541 991 980 980
q18 7457 6908 7005 6908
q19 1723 1580 1512 1512
q20 594 329 295 295
q21 4443 4100 4105 4100
q22 500 400 394 394
Total cold run time: 118341 ms
Total hot run time: 50156 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4387 4328 4314 4314
q2 321 226 223 223
q3 4153 4145 4164 4145
q4 2763 2739 2735 2735
q5 7121 7085 7053 7053
q6 243 119 120 119
q7 3251 2868 2834 2834
q8 4357 4474 4518 4474
q9 16812 16700 16713 16700
q10 4187 4271 4264 4264
q11 778 674 703 674
q12 1028 849 863 849
q13 7051 3761 3762 3761
q14 455 444 416 416
q15 511 456 451 451
q16 746 685 687 685
q17 3877 3882 3877 3877
q18 8727 8744 8853 8744
q19 1712 1706 1644 1644
q20 2361 2153 2140 2140
q21 8452 8498 8457 8457
q22 1030 955 956 955
Total cold run time: 84323 ms
Total hot run time: 79514 ms
TPC-DS: Total hot run time: 203984 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 2f52593d1c0307197ad7261126a446f2a27940c5, data reload: false
query1 946 389 389 389
query2 6592 2730 2660 2660
query3 6928 211 205 205
query4 19960 17986 17945 17945
query5 19734 6484 6516 6484
query6 307 217 235 217
query7 4188 302 321 302
query8 259 284 240 240
query9 3144 2707 2629 2629
query10 412 315 318 315
query11 11329 10751 10761 10751
query12 124 73 75 73
query13 5602 695 676 676
query14 17730 13697 13841 13697
query15 389 218 217 217
query16 6448 287 261 261
query17 1710 1466 893 893
query18 2281 413 412 412
query19 216 162 151 151
query20 78 79 80 79
query21 193 102 94 94
query22 5274 5105 4996 4996
query23 32652 31858 31801 31801
query24 6960 6698 6504 6504
query25 531 429 418 418
query26 522 163 160 160
query27 1848 298 298 298
query28 6112 2359 2331 2331
query29 2823 2732 2776 2732
query30 242 166 165 165
query31 919 757 732 732
query32 74 68 61 61
query33 403 261 258 258
query34 845 484 486 484
query35 1135 934 941 934
query36 1309 1423 1088 1088
query37 93 61 61 61
query38 3123 2909 2965 2909
query39 1379 1337 1310 1310
query40 211 95 99 95
query41 40 38 38 38
query42 83 84 88 84
query43 696 696 680 680
query44 1141 706 727 706
query45 244 244 227 227
query46 1221 964 949 949
query47 1860 1705 1675 1675
query48 996 739 729 729
query49 609 366 363 363
query50 879 635 583 583
query51 4841 4712 4627 4627
query52 89 79 89 79
query53 454 321 322 321
query54 2683 2445 2433 2433
query55 87 87 79 79
query56 235 223 199 199
query57 1260 1156 1101 1101
query58 215 202 209 202
query59 4078 3800 4117 3800
query60 216 216 197 197
query61 96 95 95 95
query62 781 495 481 481
query63 479 342 353 342
query64 2407 1561 1360 1360
query65 3678 3562 3543 3543
query66 782 389 378 378
query67 15440 16368 15302 15302
query68 8539 656 660 656
query69 584 365 355 355
query70 1675 1365 1317 1317
query71 414 309 314 309
query72 6497 3493 3448 3448
query73 750 327 330 327
query74 6317 5875 5823 5823
query75 4575 3727 3661 3661
query76 4742 1130 1164 1130
query77 673 256 267 256
query78 12501 12740 12376 12376
query79 12477 650 651 650
query80 805 396 410 396
query81 498 234 233 233
query82 644 100 96 96
query83 164 133 131 131
query84 263 73 71 71
query85 779 323 332 323
query86 333 317 306 306
query87 3261 3073 3018 3018
query88 5424 2369 2349 2349
query89 420 303 284 284
query90 1921 201 218 201
query91 176 144 141 141
query92 63 54 56 54
query93 4713 567 565 565
query94 738 203 216 203
query95 1106 1056 1037 1037
query96 635 339 322 322
query97 6460 6313 6327 6313
query98 199 180 180 180
query99 2817 905 853 853
Total cold run time: 311778 ms
Total hot run time: 203984 ms
ClickBench: Total hot run time: 30.54 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 2f52593d1c0307197ad7261126a446f2a27940c5, data reload: false
query1 0.02 0.02 0.02
query2 0.07 0.02 0.02
query3 0.24 0.04 0.05
query4 1.80 0.07 0.07
query5 0.53 0.51 0.52
query6 1.25 0.62 0.60
query7 0.01 0.01 0.01
query8 0.03 0.03 0.02
query9 0.52 0.49 0.47
query10 0.54 0.54 0.53
query11 0.11 0.09 0.08
query12 0.11 0.08 0.09
query13 0.62 0.61 0.61
query14 0.78 0.78 0.78
query15 0.77 0.75 0.74
query16 0.36 0.37 0.37
query17 1.01 1.02 0.98
query18 0.20 0.26 0.25
query19 1.93 1.88 1.84
query20 0.02 0.01 0.01
query21 15.50 0.57 0.55
query22 2.28 3.12 1.50
query23 17.20 1.04 0.99
query24 4.87 1.10 1.07
query25 0.40 0.10 0.06
query26 0.54 0.15 0.16
query27 0.05 0.05 0.04
query28 8.09 0.76 0.71
query29 12.67 2.18 2.31
query30 0.62 0.54 0.51
query31 2.81 0.40 0.38
query32 3.38 0.49 0.50
query33 3.13 3.04 3.10
query34 15.26 4.82 4.78
query35 4.84 4.81 4.83
query36 1.04 1.02 1.01
query37 0.06 0.04 0.05
query38 0.03 0.02 0.02
query39 0.02 0.02 0.01
query40 0.16 0.13 0.14
query41 0.07 0.01 0.01
query42 0.02 0.01 0.01
query43 0.03 0.02 0.02
Total cold run time: 103.99 s
Total hot run time: 30.54 s
Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
Load test result on commit 2f52593d1c0307197ad7261126a446f2a27940c5 with default session variables
Stream load json: 19 seconds loaded 2358488459 Bytes, about 118 MB/s
Stream load orc: 58 seconds loaded 1101869774 Bytes, about 18 MB/s
Stream load parquet: 32 seconds loaded 861443392 Bytes, about 25 MB/s
Insert into select: 21.7 seconds inserted 10000000 Rows, about 460K ops/s
TPC-H: Total hot run time: 49782 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 43f16867073c90a8187f6f2ec19305f498f6ee57, data reload: false
------ Round 1 ----------------------------------
q1 18036 4416 4319 4319
q2 2045 188 151 151
q3 10397 1885 1938 1885
q4 10281 1231 1295 1231
q5 8837 3901 3896 3896
q6 235 126 131 126
q7 2101 1588 1566 1566
q8 9280 2762 2722 2722
q9 10704 10363 10267 10267
q10 8627 3529 3508 3508
q11 421 256 253 253
q12 476 305 298 298
q13 18351 4002 4013 4002
q14 351 322 325 322
q15 539 461 470 461
q16 682 573 573 573
q17 1142 996 992 992
q18 7422 6935 6885 6885
q19 1730 1572 1563 1563
q20 532 313 286 286
q21 4494 4113 4099 4099
q22 491 377 387 377
Total cold run time: 117174 ms
Total hot run time: 49782 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4311 4280 4296 4280
q2 321 223 217 217
q3 4185 4142 4151 4142
q4 2756 2773 2757 2757
q5 7190 7095 7076 7076
q6 239 122 121 121
q7 3273 2814 2835 2814
q8 4355 4454 4479 4454
q9 16924 16705 16831 16705
q10 4251 4255 4255 4255
q11 756 703 669 669
q12 1049 844 850 844
q13 7037 3718 3755 3718
q14 446 416 427 416
q15 509 451 461 451
q16 740 683 692 683
q17 3804 3789 3897 3789
q18 8814 8835 8775 8775
q19 1700 1723 1646 1646
q20 2384 2107 2126 2107
q21 8434 8382 8378 8378
q22 1030 964 954 954
Total cold run time: 84508 ms
Total hot run time: 79251 ms
TPC-DS: Total hot run time: 203674 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 43f16867073c90a8187f6f2ec19305f498f6ee57, data reload: false
query1 931 390 382 382
query2 6593 2852 2590 2590
query3 6918 213 207 207
query4 19908 17957 17885 17885
query5 19740 6591 6506 6506
query6 294 221 226 221
query7 4268 294 310 294
query8 255 249 244 244
query9 3129 2707 2654 2654
query10 431 313 298 298
query11 11317 10799 10742 10742
query12 126 79 71 71
query13 5589 703 671 671
query14 17913 13983 13821 13821
query15 358 218 241 218
query16 6449 291 262 262
query17 1490 1492 888 888
query18 2263 417 415 415
query19 209 148 162 148
query20 70 80 78 78
query21 190 93 95 93
query22 5007 4982 4978 4978
query23 32620 31811 31944 31811
query24 6818 6557 6506 6506
query25 517 424 425 424
query26 523 164 160 160
query27 1809 307 297 297
query28 6124 2350 2341 2341
query29 2859 2706 2900 2706
query30 240 167 169 167
query31 930 779 739 739
query32 72 65 60 60
query33 401 253 255 253
query34 844 472 499 472
query35 1129 945 870 870
query36 1277 1130 1062 1062
query37 93 64 61 61
query38 3065 2917 2999 2917
query39 1385 1335 1310 1310
query40 208 102 96 96
query41 41 37 37 37
query42 87 83 81 81
query43 667 586 704 586
query44 1155 709 717 709
query45 242 232 227 227
query46 1213 964 988 964
query47 1857 1661 1862 1661
query48 1015 706 692 692
query49 640 381 373 373
query50 869 622 588 588
query51 4769 4662 4643 4643
query52 91 92 81 81
query53 457 320 330 320
query54 2643 2478 2456 2456
query55 91 88 88 88
query56 218 210 219 210
query57 1229 1175 1089 1089
query58 219 194 186 186
query59 4129 4215 4068 4068
query60 217 198 211 198
query61 101 99 96 96
query62 849 515 501 501
query63 484 341 341 341
query64 2343 1522 1513 1513
query65 3679 3553 3560 3553
query66 778 374 379 374
query67 17066 15136 15426 15136
query68 8579 655 650 650
query69 579 357 345 345
query70 1890 1423 1437 1423
query71 418 312 309 309
query72 6513 3502 3502 3502
query73 745 327 325 325
query74 6318 5877 5820 5820
query75 5278 3694 3662 3662
query76 5215 1143 1190 1143
query77 857 252 270 252
query78 12578 11661 12082 11661
query79 8236 658 658 658
query80 1101 420 406 406
query81 501 234 237 234
query82 1666 99 100 99
query83 169 132 142 132
query84 255 73 71 71
query85 870 323 317 317
query86 323 332 326 326
query87 3183 3019 2994 2994
query88 4643 2374 2372 2372
query89 374 302 328 302
query90 1942 207 219 207
query91 180 145 143 143
query92 60 55 54 54
query93 6156 615 590 590
query94 693 219 218 218
query95 1108 1074 1082 1074
query96 636 330 339 330
query97 6505 6344 6363 6344
query98 175 171 168 168
query99 2924 854 861 854
Total cold run time: 312181 ms
Total hot run time: 203674 ms
ClickBench: Total hot run time: 30.87 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 43f16867073c90a8187f6f2ec19305f498f6ee57, data reload: false
query1 0.02 0.02 0.02
query2 0.07 0.02 0.02
query3 0.25 0.04 0.04
query4 1.79 0.06 0.06
query5 0.53 0.53 0.52
query6 1.23 0.62 0.62
query7 0.01 0.01 0.01
query8 0.04 0.03 0.02
query9 0.54 0.50 0.48
query10 0.55 0.53 0.53
query11 0.12 0.08 0.08
query12 0.11 0.10 0.09
query13 0.62 0.61 0.61
query14 0.78 0.80 0.81
query15 0.79 0.76 0.76
query16 0.37 0.36 0.39
query17 0.97 1.01 0.98
query18 0.21 0.27 0.23
query19 1.91 1.87 1.86
query20 0.01 0.01 0.01
query21 15.48 0.57 0.56
query22 2.06 1.83 1.77
query23 16.98 1.09 0.85
query24 6.02 1.22 1.05
query25 0.35 0.08 0.04
query26 0.71 0.14 0.15
query27 0.05 0.05 0.05
query28 7.07 0.75 0.78
query29 12.66 2.28 2.32
query30 0.61 0.54 0.52
query31 2.82 0.40 0.38
query32 3.36 0.48 0.49
query33 3.08 3.05 3.09
query34 15.23 4.82 4.78
query35 4.86 4.83 4.84
query36 1.07 1.02 1.00
query37 0.06 0.04 0.05
query38 0.04 0.02 0.02
query39 0.02 0.01 0.02
query40 0.17 0.14 0.14
query41 0.06 0.01 0.02
query42 0.02 0.02 0.01
query43 0.02 0.01 0.01
Total cold run time: 103.72 s
Total hot run time: 30.87 s
Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
Load test result on commit 43f16867073c90a8187f6f2ec19305f498f6ee57 with default session variables
Stream load json: 20 seconds loaded 2358488459 Bytes, about 112 MB/s
Stream load orc: 59 seconds loaded 1101869774 Bytes, about 17 MB/s
Stream load parquet: 32 seconds loaded 861443392 Bytes, about 25 MB/s
Insert into select: 21.4 seconds inserted 10000000 Rows, about 467K ops/s
TPC-H: Total hot run time: 49625 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 85ebc560bb740966b767f9a667d8ccce49d72cef, data reload: false
------ Round 1 ----------------------------------
q1 18051 4329 4333 4329
q2 2040 192 148 148
q3 10337 1898 1976 1898
q4 10363 1254 1326 1254
q5 8736 3877 3918 3877
q6 237 123 125 123
q7 2052 1617 1593 1593
q8 9355 2742 2719 2719
q9 10623 10317 10147 10147
q10 8652 3544 3527 3527
q11 436 242 243 242
q12 467 309 306 306
q13 18355 3950 4020 3950
q14 352 328 338 328
q15 506 448 460 448
q16 695 578 588 578
q17 1140 978 997 978
q18 7306 6893 6867 6867
q19 1702 1549 1492 1492
q20 527 309 307 307
q21 4468 4147 4128 4128
q22 495 386 401 386
Total cold run time: 116895 ms
Total hot run time: 49625 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4302 4344 4295 4295
q2 324 222 226 222
q3 4186 4134 4108 4108
q4 2741 2741 2737 2737
q5 7192 7061 7110 7061
q6 236 117 118 117
q7 3278 2881 2830 2830
q8 4359 4538 4491 4491
q9 16874 16650 16837 16650
q10 4288 4252 4299 4252
q11 751 681 691 681
q12 1056 871 851 851
q13 7328 3749 3722 3722
q14 461 431 420 420
q15 502 459 456 456
q16 731 669 669 669
q17 3770 3818 3861 3818
q18 8723 8771 8751 8751
q19 1726 1699 1654 1654
q20 2343 2099 2076 2076
q21 8427 8384 8532 8384
q22 1044 968 961 961
Total cold run time: 84642 ms
Total hot run time: 79206 ms
TPC-DS: Total hot run time: 202500 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 85ebc560bb740966b767f9a667d8ccce49d72cef, data reload: false
query1 940 389 379 379
query2 6561 2972 2823 2823
query3 6921 211 212 211
query4 19769 17820 17850 17820
query5 19742 6539 6531 6531
query6 277 224 217 217
query7 4147 307 313 307
query8 251 231 252 231
query9 3119 2692 2618 2618
query10 405 324 292 292
query11 11330 10807 10802 10802
query12 123 76 73 73
query13 5589 704 684 684
query14 17468 13302 13203 13203
query15 358 215 227 215
query16 6499 285 260 260
query17 1735 1475 868 868
query18 2332 412 403 403
query19 212 150 160 150
query20 84 79 82 79
query21 191 94 91 91
query22 5282 4986 5040 4986
query23 32335 31747 31911 31747
query24 6927 6489 6456 6456
query25 510 447 433 433
query26 535 159 157 157
query27 1880 290 290 290
query28 6159 2361 2321 2321
query29 2844 2665 2841 2665
query30 240 163 167 163
query31 901 728 739 728
query32 74 67 62 62
query33 393 253 251 251
query34 847 470 472 470
query35 1135 925 925 925
query36 1390 1076 1261 1076
query37 90 61 59 59
query38 3071 2921 2945 2921
query39 1366 1324 1319 1319
query40 205 92 91 91
query41 42 38 36 36
query42 89 86 88 86
query43 743 793 675 675
query44 1103 733 720 720
query45 242 231 227 227
query46 1227 981 961 961
query47 1856 1658 1721 1658
query48 1010 705 707 705
query49 614 375 377 375
query50 867 645 605 605
query51 4839 4734 4638 4638
query52 94 84 80 80
query53 436 315 317 315
query54 2660 2462 2480 2462
query55 89 89 78 78
query56 233 211 213 211
query57 1234 1069 1105 1069
query58 222 195 211 195
query59 4220 4132 4104 4104
query60 221 209 206 206
query61 98 93 95 93
query62 859 484 489 484
query63 491 340 334 334
query64 2582 1449 1510 1449
query65 3645 3570 3584 3570
query66 800 371 381 371
query67 16384 15651 14741 14741
query68 9583 693 654 654
query69 578 342 340 340
query70 1714 1354 1437 1354
query71 426 313 322 313
query72 6527 3463 3500 3463
query73 732 325 323 323
query74 6238 5886 5876 5876
query75 5440 3750 3709 3709
query76 5832 1148 1198 1148
query77 1016 262 262 262
query78 12583 12034 11591 11591
query79 11140 638 641 638
query80 1399 402 392 392
query81 495 234 230 230
query82 1393 95 100 95
query83 166 135 130 130
query84 262 72 71 71
query85 871 310 310 310
query86 328 302 294 294
query87 3246 2969 3031 2969
query88 4983 2340 2325 2325
query89 460 295 284 284
query90 2002 202 209 202
query91 181 149 152 149
query92 61 52 53 52
query93 6592 578 577 577
query94 732 209 209 209
query95 1102 1038 1030 1030
query96 636 338 326 326
query97 6462 6319 6278 6278
query98 186 187 176 176
query99 3084 1015 905 905
Total cold run time: 317587 ms
Total hot run time: 202500 ms
ClickBench: Total hot run time: 30.31 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 85ebc560bb740966b767f9a667d8ccce49d72cef, data reload: false
query1 0.02 0.02 0.01
query2 0.07 0.03 0.02
query3 0.25 0.04 0.05
query4 1.80 0.08 0.07
query5 0.54 0.52 0.51
query6 1.31 0.63 0.61
query7 0.01 0.01 0.02
query8 0.03 0.02 0.02
query9 0.53 0.48 0.47
query10 0.54 0.54 0.54
query11 0.11 0.08 0.08
query12 0.12 0.09 0.08
query13 0.63 0.61 0.62
query14 0.78 0.77 0.81
query15 0.77 0.75 0.75
query16 0.35 0.37 0.40
query17 0.97 1.01 0.99
query18 0.24 0.21 0.27
query19 1.87 1.84 1.86
query20 0.01 0.01 0.01
query21 15.86 0.57 0.57
query22 2.23 2.15 1.45
query23 16.99 1.03 0.91
query24 6.51 1.17 0.92
query25 0.41 0.08 0.04
query26 0.70 0.13 0.15
query27 0.04 0.05 0.03
query28 6.57 0.76 0.78
query29 12.72 2.20 2.37
query30 0.59 0.54 0.53
query31 2.80 0.38 0.37
query32 3.41 0.50 0.50
query33 3.10 3.04 3.11
query34 15.26 4.80 4.76
query35 4.85 4.86 4.84
query36 1.05 1.00 1.01
query37 0.06 0.04 0.05
query38 0.04 0.02 0.02
query39 0.02 0.01 0.02
query40 0.16 0.14 0.15
query41 0.07 0.02 0.01
query42 0.02 0.01 0.01
query43 0.02 0.02 0.02
Total cold run time: 104.43 s
Total hot run time: 30.31 s
Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
Load test result on commit 85ebc560bb740966b767f9a667d8ccce49d72cef with default session variables
Stream load json: 20 seconds loaded 2358488459 Bytes, about 112 MB/s
Stream load orc: 58 seconds loaded 1101869774 Bytes, about 18 MB/s
Stream load parquet: 31 seconds loaded 861443392 Bytes, about 26 MB/s
Insert into select: 21.2 seconds inserted 10000000 Rows, about 471K ops/s
TPC-H: Total hot run time: 49423 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 241dc8a94c097eb2fb459a68ee46955e446d58bd, data reload: false
------ Round 1 ----------------------------------
q1 17800 4356 4290 4290
q2 2051 198 146 146
q3 10351 1881 1931 1881
q4 10341 1209 1302 1209
q5 8420 3892 3857 3857
q6 233 126 126 126
q7 2059 1609 1597 1597
q8 9299 2718 2707 2707
q9 10489 10363 10207 10207
q10 8621 3544 3544 3544
q11 414 234 251 234
q12 461 298 304 298
q13 18368 3951 4017 3951
q14 351 318 325 318
q15 507 462 450 450
q16 696 588 584 584
q17 1132 970 992 970
q18 7204 6845 6786 6786
q19 1690 1530 1480 1480
q20 545 305 301 301
q21 4433 4107 4091 4091
q22 515 396 396 396
Total cold run time: 115980 ms
Total hot run time: 49423 ms
----- Round 2, with runtime_filter_mode=off -----
q1 4328 4294 4296 4294
q2 322 220 227 220
q3 4181 4099 4144 4099
q4 2777 2754 2726 2726
q5 7177 7074 7127 7074
q6 234 120 122 120
q7 3249 2820 2866 2820
q8 4331 4469 4473 4469
q9 16827 16665 16769 16665
q10 4242 4236 4260 4236
q11 746 729 687 687
q12 1037 870 862 862
q13 6635 3743 3707 3707
q14 460 432 432 432
q15 508 448 462 448
q16 731 678 681 678
q17 3936 3823 3870 3823
q18 8835 8718 8765 8718
q19 1700 1712 1635 1635
q20 2391 2128 2145 2128
q21 8545 8447 8394 8394
q22 1036 969 964 964
Total cold run time: 84228 ms
Total hot run time: 79199 ms
TPC-DS: Total hot run time: 205495 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 241dc8a94c097eb2fb459a68ee46955e446d58bd, data reload: false
query1 928 384 386 384
query2 6599 2888 2701 2701
query3 6921 218 208 208
query4 21093 18219 18086 18086
query5 19725 6508 6527 6508
query6 306 226 217 217
query7 4157 299 324 299
query8 249 304 243 243
query9 3119 2675 2607 2607
query10 394 298 324 298
query11 11417 10885 11016 10885
query12 123 80 77 77
query13 5595 688 680 680
query14 17729 13813 13352 13352
query15 375 237 236 236
query16 6476 288 261 261
query17 1732 1443 873 873
query18 2324 418 418 418
query19 211 155 148 148
query20 80 79 82 79
query21 197 92 91 91
query22 5254 4979 5282 4979
query23 33243 32729 32706 32706
query24 7773 6559 6552 6552
query25 530 438 417 417
query26 1257 160 162 160
query27 2223 301 297 297
query28 6163 2353 2323 2323
query29 3070 2597 2820 2597
query30 240 174 167 167
query31 901 735 753 735
query32 73 62 60 60
query33 427 259 234 234
query34 851 475 472 472
query35 1128 904 903 903
query36 1318 1038 1117 1038
query37 172 62 62 62
query38 3091 2914 2935 2914
query39 1377 1335 1335 1335
query40 304 91 100 91
query41 41 43 38 38
query42 88 88 85 85
query43 707 688 678 678
query44 1108 725 714 714
query45 240 239 231 231
query46 1238 960 978 960
query47 1807 1992 2027 1992
query48 1009 710 710 710
query49 649 382 365 365
query50 869 648 599 599
query51 4760 4659 4681 4659
query52 90 84 82 82
query53 448 316 321 316
query54 2685 2457 2475 2457
query55 88 76 82 76
query56 233 199 212 199
query57 1164 1082 1070 1070
query58 219 195 213 195
query59 4420 4113 3915 3915
query60 205 225 216 216
query61 96 92 104 92
query62 791 458 488 458
query63 482 343 339 339
query64 2711 1597 1471 1471
query65 3646 3559 3582 3559
query66 798 372 380 372
query67 17420 16355 16568 16355
query68 8542 667 651 651
query69 562 341 342 341
query70 1635 1607 1338 1338
query71 409 312 311 311
query72 6165 3456 3516 3456
query73 732 326 324 324
query74 6401 5865 5920 5865
query75 4581 3771 3684 3684
query76 4722 1123 1208 1123
query77 617 249 273 249
query78 12399 11545 11504 11504
query79 7667 626 656 626
query80 1635 401 409 401
query81 502 237 237 237
query82 1458 109 97 97
query83 167 136 130 130
query84 257 70 72 70
query85 1287 318 329 318
query86 354 315 297 297
query87 3320 2990 3028 2990
query88 5191 2367 2352 2352
query89 362 305 284 284
query90 1991 211 219 211
query91 190 140 158 140
query92 58 51 47 47
query93 4308 564 616 564
query94 994 215 213 213
query95 1123 1038 1071 1038
query96 658 327 334 327
query97 6518 6438 6394 6394
query98 184 178 172 172
query99 2871 845 877 845
Total cold run time: 315017 ms
Total hot run time: 205495 ms