ERF regression tests

Benchmark Updated

Comparison Failed

Compilation Failed

Crashed

Passed

Performance Drop

date	ABL-Deardorff	ABL-Deardorff-OMP	ABL-MOST	ABL-MOST-OMP	ABL-MRF	ABL-MYJ	ABL-MYNN	ABL-SHOC-1p5	ABL-SHOC-HO	ABL-Smag	ABL-Smag-OMP	Bomex	Bubble_Kessler	Bubble_Kessler_NoRain	Bubble_Morrison	Bubble_SAM	Bubble_WDM6	Bubble_WSM6	DensityCurrent	DensityCurrent-OMP	DensityCurrent_Terrain	DensityCurrent_Terrain-OMP	DensityCurrent_anelastic	DensityCurrent_detJ2	DensityCurrent_ml	DensityCurrent_ml_anelastic	DensityCurrent_ml_hybrid	DensityCurrent_ml_hybrid_zlev	EkmanSpiral_custom	EkmanSpiral_custom_restart	EkmanSpiral_ideal	EkmanSpiral_ideal_restart	EkmanSpiral_input_sounding	EkmanSpiral_sounding_restart	ImmersedForcing_Building	ImmersedForcing_Terrain	IsentropicVortexAdvecting	IsentropicVortexStationary	MetGrid	MetGrid_restart	MovingTerrain_nosub	ParticlesOverWoA	SDM_Congestus3D	SDM_MultiSpecies_Bubble2D	SDM_RICO3D	SDM_SineMassFlux	ScalarAdvDiffInflowOutflow	ScalarAdvecDiffDoubleDen	ScalarAdvecDiffUniformU	ScalarAdvecShearedU	ScalarAdvecShearedU_anelastic	ScalarAdvecUniformU	ScalarDiffusion	ScalarDiffusionSine	TaylorGreenAdvDiffDoubleDen	TaylorGreenAdvecting	TurbulentInflow	TurbulentInflow_anelastic	WPS_Test_Terrain	WPS_Test_Terrain-OMP	WPS_Test_restart	WoA_EB_x	WoA_EB_y
2026-09-23 ∗	!	:)	!	:)	!	!	!	!	!	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	!	!	:)	!	:)	:)	:)	:)	:)	!	!	!	!	!	:)	:)	:)	!	:)	!	!	!	!	!	:)	:)	!	!	!	!	!	:)	:)	!	!	:)	!	!
2026-09-17-001 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-17 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-16 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-15-005 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-15-004 ∗																							U			U	U	U																														U
2026-09-15-001 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	!	!	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)
2026-09-15 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-14 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-13-004 ∗																																										U
2026-09-13-003 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-13-002 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-13-001 ∗																									U
2026-09-13 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-11-002 ∗																	U										U
2026-09-11-001 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-11 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:]	:)	:)	:)	:)	:)
2026-09-10-003 ∗																										U	U	U
2026-09-10-002 ∗																										:)
2026-09-10-001 ∗																										xx
2026-09-10 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	!	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:]	:)	:)	:)	:)	:)
2026-09-09-005 ∗																																							U																				U	U
2026-09-09-004 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	!	:)	:)	:)
2026-09-09-002 ∗								U	U
2026-09-09 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-08 ∗	:)	:)	:]	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-07 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-04 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-03 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-02 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-01-001 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	!	:)	:)	:)
2026-09-01 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:]	:)	:)	:)	:)	:)
2026-08-31 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-29 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-28-006 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-28-005 ∗					U		U																										U		U	U
2026-08-28-004 ∗	:)	:)	:)	:)	!	:)	!			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-28-003 ∗					U		U																										U		U	U
2026-08-28-002 ∗	:)	:)	:)	:)	!	:)	!			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	!	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-28-001 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-28 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-27-001 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-27 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:]	:)	:)	:)	:)	:)
2026-08-26-013 ∗																																							U
2026-08-26-012 ∗																															:)	:)
2026-08-26-011 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	xx	xx	:)	:)	:)	:)	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-08-26-010 ∗	:)	:)	:)	:)	:)	:)	:)			:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	xx	xx	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)

older tests