Propriétaire du château de Bois-Claireau (Teillé), membre du Conseil général de l'Orne de 1852 à 1869 et maire de Durcet de 1860 à 1869, il se présenta, le , dans la 3ecirconscription de ce département, et fut élu, avec l'appui du gouvernement, député au Corps législatif par 16 153 voix (31 608 votants, 40 093 inscrits), contre 15 429 à Arthur de la Ferrière, en remplacement de ce dernier dont l'élection avait été invalidée.
Villedieu de Torcy siégea au sein du parti bonapartiste, et vota, comme son père, avec la majorité impérialiste, et fut réélu, le , par 23 839 voix (26 746 votants, 40 497 inscrits), contre 2 151 à Roche. Il se représenta sans succès le , et n'obtint que 12 078 voix contre 17 813 à l'élu, Gévelot, de l'opposition.
Il épousa en 1857, Savina de Taisne avec qui il eut 6 enfants.