L'hôtel est construit en 1733 pour Jean Soulas-Girollet l'aîné, un marchand-fabricant tourangeau, sur les vestiges d'un bâtiment brique et pierre du XVesiècle et de maisons qu'il avait acquis entre 1719 et 1733. Il y meurt en 1772, laissant pour hériter Jean-Noël Soulas, président-trésorier de France au bureau des finances de Tours, et Marie-Anne Soulas (épouse de Bernard de Comminges, baron de Lary, lieutenant-colonel de dragons).
François Cartier-Roze, marchand-fabricant, l'acquiert en 1772 pour 20 000 livres.
Jean Soulas a épousé Marie Anne Girollet le à Saint-Pierre-le-Puellier. Son frère Julien Soulas, également marchand-fabricant, était entrepreneur de damas et de velours: son gendre Pierre-Antoine-Claude Papion reprit l'entreprise après lui et fit construire l'hôtel Papion.