Augusta Louisa Frankland (d) (à partir de ) Emily Elizabeth Julia Thellusson (d) (à partir de )
Enfants
Thomas de Grey Walsingham John Augustus de Grey (d) Emily Augusta Louisa de Grey (d) Beatrice de Grey (d) Mabel de Grey (d) Arnald de Grey (en) Robert Baynard de Grey (d) Elizabeth Odeyne de Grey (d)
Il se suicide en 1870. Il se marie deux fois. Il épouse en 1842 Augusta Louisa Frankland-Russell, la fille de Robert Frankland-Russell (7e baronnet), de Thirkleby, Yorkshire, avec qui il a un fils et héritier Thomas de Grey (6e baron Walsingham). Il se remarie en 1847 avec Emily Elizabeth Julia Thellusson, fille et héritière de John Thellusson, 2e baron Rendlesham, avec qui il a quatre autres fils et quatre filles.