Cette maison de campagne est construite vers 1733 par Wredenhall Pearce, qui hérite du domaine en 1731. Le nouveau château, conçu par William Smith "le Jeune" de Warwick, de trois étages et avec une façade à douze travées portant un parapet à balustrade, possède un hall d'entrée circulaire inhabituel avec des colonnes ioniques et une frise de chèvrefeuille[1],[2].
En 1781, Catherine Hall, fille et héritière de William Pearce Hall épouse Charles Rouse-Boughton[3]. Les améliorations apportées au château pour William Rouse-Boughton en 1824 comprennent une nouvelle façade d'entrée, conçue par l'architecte Edward Haycock "l'Ancien", avec un portique de style dorique[2].
Charles Rouse-Boughton y réside en 1881 avec sa famille et neuf domestiques[4]. Le fils aîné, William Rouse-Boughton, haut-shérif de Salop (1914/15), épouse Eleanor Hotham dont un enfant unique, le major Edward Rouse-Boughton, 13e et dernier baronnet, après la mort duquel en 1963[5], sa fille unique, Mlle Mary Rouse-Boughton (1917–1991) continue à y résider[6]. Elle transmet ensuite le domaine de Downton Hall à son petit-neveu, Michael Wiggin[7].