[Perf 15%] System.Tests.Perf_String (7)

[performanceautofiler]

Run Information

Architecture	x64
OS	ubuntu 18.04
Changes	diff

Regressions in System.Tests.Perf_String

Benchmark	Baseline	Test	Test/Base	Modality	Baseline Outlier	Baseline ETL	Comapre ETL
ToUpperInvariant	1.12 μs	949.96 ns	0.85	Bimodal	True
ToUpper	1.21 μs	1.04 μs	0.86	Bimodal	True
ToLower	1.31 μs	1.11 μs	0.85	Bimodal	True
ToUpper	3.08 μs	2.68 μs	0.87	Bimodal	True
ToLowerInvariant	1.22 μs	1.02 μs	0.84	Bimodal	True
ToUpper	1.20 μs	1.04 μs	0.86	Bimodal	True
ToLower	1.30 μs	1.09 μs	0.84	Bimodal	True

Related Issue on x86 Windows

[Perf -8%] System.Tests.Perf_String.Replace_Char

Historical Data in Reporting System

Repro

git clone https://github.com/dotnet/performance.git
python3 .\performance\scripts\benchmarks_ci.py -f netcoreapp5.0 --filter 'System.Tests.Perf_String*'

Histogram

System.Tests.Perf_String.ToUpperInvariant(s: "test")

[ 905.800 ;  935.977) | @
[ 935.977 ;  986.307) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[ 986.307 ; 1032.163) | @@@@@
[1032.163 ; 1085.876) | 
[1085.876 ; 1136.207) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1136.207 ; 1184.658) | @@@@@

System.Tests.Perf_String.ToUpper(s: "TeSt")

[1006.769 ; 1061.248) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1061.248 ; 1109.473) | @@@@@@@@
[1109.473 ; 1173.851) | @@
[1173.851 ; 1228.330) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1228.330 ; 1292.831) | @@@@@

System.Tests.Perf_String.ToLower(s: "TeSt")

[1055.736 ; 1115.013) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1115.013 ; 1161.436) | @@@@
[1161.436 ; 1199.051) | 
[1199.051 ; 1238.356) | @@
[1238.356 ; 1297.633) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1297.633 ; 1354.539) | @@@@@

System.Tests.Perf_String.ToUpper(s: "This is a much longer piece of text that might benefit more from vectorization.")

[2644.941 ; 2759.785) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@
[2759.785 ; 2880.915) | @@@@@@@@@
[2880.915 ; 2948.257) | @@@@@@@@@@@@@@@@@@@@@@@@
[2948.257 ; 3045.159) | @@@@@@@@@
[3045.159 ; 3112.500) | @

System.Tests.Perf_String.ToLowerInvariant(s: "TeSt")

[ 982.243 ; 1035.238) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1035.238 ; 1084.737) | @@@
[1084.737 ; 1139.028) | @
[1139.028 ; 1192.023) | @@@@@@@@@@@@@@@@@@@@@@@@@@@
[1192.023 ; 1251.143) | @@@@@@@

System.Tests.Perf_String.ToUpper(s: "test")

[ 964.918 ; 1014.823) | @
[1014.823 ; 1070.463) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1070.463 ; 1120.124) | @@@@
[1120.124 ; 1181.561) | @
[1181.561 ; 1237.201) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1237.201 ; 1291.924) | @@@@@@

System.Tests.Perf_String.ToLower(s: "TEST")

[1054.982 ; 1113.444) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[1113.444 ; 1163.324) | @@
[1163.324 ; 1197.725) | 
[1197.725 ; 1245.464) | @@@@@@@
[1245.464 ; 1303.926) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@

Docs

Profiling workflow for dotnet/runtime repository
Benchmarking workflow for dotnet/runtime repository