[Perf -185%] System.Collections.ContainsFalse<Int32> (7)

[performanceautofiler]

Run Information

Architecture	x86
OS	Windows 10.0.18362
Changes	diff

Regressions in System.Collections.ContainsFalse

Benchmark	Baseline	Test	Test/Base	Modality	Baseline Outlier
ICollection	73.49 μs	222.37 μs	3.03		False
Queue	77.22 μs	225.11 μs	2.92		False
ImmutableArray	75.47 μs	232.58 μs	3.08		True
ImmutableSortedSet	48.56 μs	52.42 μs	1.08		False
Span	68.19 μs	237.37 μs	3.48		False
Array	69.94 μs	223.58 μs	3.20		False
List	69.64 μs	221.74 μs	3.18		False

Historical Data in Reporting System

Repro

git clone https://github.com/dotnet/performance.git
py .\performance\scripts\benchmarks_ci.py -f netcoreapp5.0 --filter 'System.Collections.ContainsFalse<Int32>*';

Histogram

System.Collections.ContainsFalse.ICollection(Size: 512)

[ 65610.841 ;  78202.202) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[ 78202.202 ;  90793.563) | 
[ 90793.563 ; 103384.924) | 
[103384.924 ; 115976.285) | 
[115976.285 ; 128567.646) | 
[128567.646 ; 141159.007) | 
[141159.007 ; 153750.367) | 
[153750.367 ; 166341.728) | 
[166341.728 ; 178933.089) | 
[178933.089 ; 191524.450) | 
[191524.450 ; 204115.811) | 
[204115.811 ; 218700.144) | 
[218700.144 ; 231291.505) | @@@@@@@@@

System.Collections.ContainsFalse.Queue(Size: 512)

[ 69805.111 ;  83261.535) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[ 83261.535 ;  95562.223) | 
[ 95562.223 ; 107862.911) | 
[107862.911 ; 120163.599) | 
[120163.599 ; 132464.286) | 
[132464.286 ; 144764.974) | 
[144764.974 ; 157065.662) | 
[157065.662 ; 169366.350) | 
[169366.350 ; 181667.038) | 
[181667.038 ; 193967.725) | 
[193967.725 ; 206268.413) | 
[206268.413 ; 218569.101) | 
[218569.101 ; 234024.524) | @@@@@@@@@

System.Collections.ContainsFalse.ImmutableArray(Size: 512)

[ 67408.220 ;  80324.798) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[ 80324.798 ;  93241.375) | 
[ 93241.375 ; 106157.953) | 
[106157.953 ; 119074.531) | 
[119074.531 ; 131991.108) | 
[131991.108 ; 144907.686) | 
[144907.686 ; 157824.264) | 
[157824.264 ; 170740.841) | 
[170740.841 ; 183657.419) | 
[183657.419 ; 196573.997) | 
[196573.997 ; 209490.574) | 
[209490.574 ; 221862.537) | 
[221862.537 ; 234779.114) | @@@@@@@@@

System.Collections.ContainsFalse.ImmutableSortedSet(Size: 512)

[48057.613 ; 49890.352) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[49890.352 ; 52785.057) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@

System.Collections.ContainsFalse.Span(Size: 512)

[ 63334.947 ;  77117.776) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[ 77117.776 ;  90900.606) | 
[ 90900.606 ; 104683.435) | 
[104683.435 ; 118466.265) | 
[118466.265 ; 132249.095) | 
[132249.095 ; 146031.924) | 
[146031.924 ; 159814.754) | 
[159814.754 ; 173597.583) | 
[173597.583 ; 187380.413) | 
[187380.413 ; 201163.243) | 
[201163.243 ; 214946.072) | 
[214946.072 ; 230841.941) | 
[230841.941 ; 246063.637) | @@@@@@@@@

System.Collections.ContainsFalse.Array(Size: 512)

[ 66167.105 ;  78602.579) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[ 78602.579 ;  91038.052) | 
[ 91038.052 ; 103473.525) | 
[103473.525 ; 115908.998) | 
[115908.998 ; 128344.471) | 
[128344.471 ; 140779.944) | 
[140779.944 ; 153215.417) | 
[153215.417 ; 165650.890) | 
[165650.890 ; 178086.363) | 
[178086.363 ; 190521.836) | 
[190521.836 ; 202957.309) | 
[202957.309 ; 216618.902) | 
[216618.902 ; 229802.150) | @@@@@@@@@

System.Collections.ContainsFalse.List(Size: 512)

[ 65600.298 ;  78162.410) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[ 78162.410 ;  90724.522) | 
[ 90724.522 ; 103286.634) | 
[103286.634 ; 115848.747) | 
[115848.747 ; 120722.699) | 
[120722.699 ; 133284.812) | @
[133284.812 ; 145846.924) | 
[145846.924 ; 158409.036) | 
[158409.036 ; 170971.148) | 
[170971.148 ; 183533.260) | 
[183533.260 ; 196095.373) | 
[196095.373 ; 208657.485) | 
[208657.485 ; 217222.185) | 
[217222.185 ; 231552.425) | @@@@@@@@@

Docs

Profiling workflow for dotnet/runtime repository
Benchmarking workflow for dotnet/runtime repository

[adamsitnik]

Similarly to #910 (comment) it might be a 32-bit issue only:

System.Collections.ContainsFalse.ImmutableArray(Size: 512)

Conclusion	Base	Diff	Base/Diff	Modality	Operating System	Bit	Processor Name	Base Runtime	Diff Runtime
Slower	149198.21	373948.48	0.40		Windows 10.0.18363.1016	Arm	Microsoft SQ1 3.0 GHz	.NET Core 3.1.6	5.0.100-rc.1.20413.9
Same	67434.86	65362.53	1.03		Windows 10.0.18363.959	X64	Intel Xeon CPU E5-1650 v4 3.60GHz	.NET Core 3.1.6	5.0.100-rc.1.20404.3
Same	67377.37	65347.37	1.03		Windows 10.0.18363.959	X64	Intel Xeon CPU E5-1650 v4 3.60GHz	.NET Core 3.1.6	5.0.100-rc.1.20418.3
Same	75122.21	73032.36	1.03		Windows 10.0.19041.450	X64	Intel Core i7-5557U CPU 3.10GHz (Broadwell)	.NET Core 3.1.6	5.0.100-rc.1.20413.9
Faster	68587.63	64676.47	1.06		ubuntu 18.04	X64	Intel Xeon CPU E5-1650 v4 3.60GHz	.NET Core 3.1.6	5.0.100-rc.1.20403.23
Same	72537.81	72571.42	1.00		macOS Mojave 10.14.5	X64	Intel Core i7-5557U CPU 3.10GHz (Broadwell)	.NET Core 3.1.6	5.0.100-rc.1.20404.2