En 1634, Munetoshi reçoit la permission de revenir à Edo et le , est nommé au poste mineur de shoinbangashira, d'un niveau comparable à celui de hatamoto avec des revenus de seulement 3 000koku. Le , il est promu ōbangashira et le reçoit un montant supplémentaire de 27 000koku, ce qui fait de lui le daimyō du domaine de Komoro nouvellement créé dans la province de Shinano.
Le , Aoyama Munetoshi est nommé au poste d'Osaka jōdai (chambellan d'Osaka). Pour assumer ses fonctions à Osaka, il restitue le domaine de Komoro au shogunat en échange de 20 000koku de territoires supplémentaires dispersés dans les provinces de Settsu, Kawachi, Izumi, Tōtōmi, Musashi et Sagami.
Le , Munetoshi est élevé au 4erang inférieur de cour. Le , il démissionne de sa fonction d'Osaka jōdai et est affecté au domaine de Hamamatsu à la place, domaine qu'il dirige jusqu'à sa mort le . Sa tombe se trouve au Daitoku-ji à Kyoto.
Edmond Papinot, Dictionnaire d'histoire et de géographie du Japon, Tokyo, Librairie Sansaisha, . «Nobiliaire du Japon» [PDF], sur www.unterstein.net (consulté le ).
