En 1609, le château d'Iwatsuki est détruit par un incendie. En 1614, Tadafusa est affecté à veiller au bon transfert du domaine d'Odawara d'Ōkubo Tadachika, qui est déchu, à Abe Masatsugu.
En , à la suite de la rébellion de Shimabara, Tadafusa est réaffecté par ordre du shogunTokugawa Iemitsu au domaine de Shimabara (40 000koku) dans la province de Hizen. Le nouveau territoire est un désert dévasté par des années de rébellion et de guerre. Cependant, Tadafusa est en mesure de restaurer la zone à son ancien niveau de productivité dans l'année de son arrivée par des exonérations fiscales, le pardon pour les rebelles survivants et en encourageant l'immigration des agriculteurs d'autres régions du Japon. Il est également responsable de la sécurité de Nagasaki avec Dejima, son port de commerce extérieur, élément important dans le système de sécurité du shogunat Tokugawa, dans Kyūshū essentiellement dominé par des tozama daimyo.
Edmond Papinot, Dictionnaire d'histoire et de géographie du Japon, Tokyo, Librairie Sansaisha, . «Nobiliaire du Japon» [PDF], sur www.unterstein.net (consulté le ).