La première mention de la famille Sausmarez à Guernesey est liée à la consécration de l'église de la paroisse de Valle en 1115 suivie d'une lettre datée de 1254 dans laquelle le roi Édouard Ier d'Angleterre, a ordonné une enquête sur les droits de l'Abbé et des moines du Mont Saint-Michel sur les îles de Guernesey et de Jersey. L'enquête mentionnait que le site de Guernesey appartenait déjà à "Dominus Henry le Canelu, Dominus Gulielmus De Saumareis, milites".
Guillaume de Saumareis est certainement la même personne que Guillaume de Saint Hilaire qui était seigneur de Samarès et qui s'appelait alors Saumareis, dans la paroisse de Saint-Clément à Jersey. Ce dernier naquit vers la fin du règne de Richard Cœur de Lion. On ne connait pas exactement quand il a acquis son nouveau fief dans la paroisse de Saint-Martin à Guernesey mais le manoir ancestral est toujours situé sur le même site que l'actuel et le fief était le même que celui mentionné dans la "Extente" (évaluation de la valeur du terrain) sous Édouard III d'Angleterre (1331) comme ayant appartenu «depuis des temps immémoriaux» à la famille de Sausmarez.
Durant la Seconde Guerre mondiale, le manoir ne fut pas réquisitionné par l'armée allemande, car le Seigneur de Sausmarez de l'époque s'était toujours opposé à l'électrification de sa demeure, ce qui évita au manoir d'être occupé par l'armée d'occupation qui renonça à ce projet.
