Descendido por primera vez en 1952, permaneció en la Segunda División durante una temporada y luego se mantuvo en la máxima categoría hasta 1956, llegando al mismo tiempo a la final de la FA Cup en cuatro ocasiones (sin ganarla). Mientras tanto, en 1921-1922, el Huddersfield ganó la FA Cup y la FA Charity Shield …