ERF regression tests

Benchmark Updated

Comparison Failed

Compilation Failed

Crashed

Passed

Performance Drop

date	ABL-Deardorff	ABL-Deardorff-GABLS	ABL-Deardorff-OMP	ABL-MOST	ABL-MOST-OMP	ABL-MRF	ABL-MYJ	ABL-MYNN	ABL-SHOC-1p5	ABL-SHOC-HO	ABL-Smag	ABL-Smag-OMP	Bomex	Bubble_Kessler	Bubble_Kessler_NoRain	Bubble_Morrison	Bubble_SAM	Bubble_WDM6	Bubble_WSM6	DensityCurrent	DensityCurrent-OMP	DensityCurrent_Terrain	DensityCurrent_Terrain-OMP	DensityCurrent_anelastic	DensityCurrent_detJ2	DensityCurrent_ml	DensityCurrent_ml_anelastic	DensityCurrent_ml_hybrid	DensityCurrent_ml_hybrid_zlev	EkmanSpiral_custom	EkmanSpiral_custom_restart	EkmanSpiral_ideal	EkmanSpiral_ideal_restart	EkmanSpiral_input_sounding	EkmanSpiral_sounding_restart	ImmersedForcing_Building	ImmersedForcing_Terrain	IsentropicVortexAdvecting	IsentropicVortexStationary	MetGrid	MetGrid_restart	MovingTerrain_nosub	NoahMP_Ideal	ParticlesOverWoA	SDM_Congestus3D	SDM_MultiSpecies_Bubble2D	SDM_RICO3D	SDM_SineMassFlux	ScalarAdvDiffInflowOutflow	ScalarAdvecDiffDoubleDen	ScalarAdvecDiffUniformU	ScalarAdvecShearedU	ScalarAdvecShearedU_anelastic	ScalarAdvecUniformU	ScalarDiffusion	ScalarDiffusionSine	TaylorGreenAdvDiffDoubleDen	TaylorGreenAdvecting	TurbulentInflow	TurbulentInflow_anelastic	WPS_Test	WPS_Test-ML-Interp	WPS_Test-OMP	WPS_Test-RRTMGP+NOAHMP	WPS_Test-RRTMGP+SLM	WPS_Test_restart	WoA_EB_x	WoA_EB_y
2026-10-02 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-10-01-001 ∗																																																													U	U	U	U	U
2026-10-01 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	!	!	!	!	:)	:)	:)
2026-09-30 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)
2026-09-29-005 ∗																																																														U
2026-09-29-004 ∗																																											U
2026-09-29-003 ∗																																																																:)
2026-09-29-002 ∗																																																																xx	:)
2026-09-29 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:(	:(	:)	:)	:)
2026-09-28-001 ∗																																																																:)
2026-09-28 ∗	:)	:)	:)	:)	:)	:)	:]	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)
2026-09-27-002 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)
2026-09-27-001 ∗																																																																	:)
2026-09-27 ∗																																																																	U
2026-09-26-003 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	xx	:)	:)	:)
2026-09-26-001 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:(		:)	:)	:)
2026-09-26 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-25-003 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-25-002 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-25-001 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-25 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-24-006 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-24-005 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-24-004 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-24-003 ∗			:)
2026-09-24-002 ∗	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-24-001 ∗																																																																			U	U
2026-09-24 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	!	!
2026-09-23-001 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	xx		:)	!	!
2026-09-23 ∗	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-22-002 ∗																																																																U
2026-09-22-001 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	!		:)	:)	:)
2026-09-22 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-21-004 ∗																																																																U
2026-09-21-003 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	!		:)	:)	:)
2026-09-21-002 ∗						U
2026-09-21-001 ∗	:)	:)	!	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-21 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-20-001 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-20 ∗																																						U	U						U	U	U	U	U	U	U	U	U	U	U	U	U	U
2026-09-19-013 ∗			:)
2026-09-19-012 ∗			!
2026-09-19-011 ∗			!
2026-09-19-010 ∗	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-19-009 ∗	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)		:)	:)		:)	:)	:)
2026-09-19-008 ∗	U	U	U	U	U	U	U	U	U	U	U	U														U	U	U		U						U	U																								U		U	U
2026-09-19-007 ∗	!	!	!	!	!	!	!	!	!	!	!	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	!	!	:)	!	:)	:)	:)	:)	:)	!	!	:)	:)	:)	:)	:)		:)	:)	:)	:)	:)	!	!	!	:)	:)	!	!	!	!	!	:)	:)	!		!	!		:)	:)	:)
2026-09-19-006 ∗																																								U																					U		U	U
2026-09-19-005 ∗	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	!	:)	:)		:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)	:)						:)	:)	:)
2026-09-19-004 ∗	:)	:)	!	:)	:)	:)	:)	:)	:)	:)	:)	:)

older tests