La tour construite en pierre jaune ocre locale est attestée en 1375, voisine du pont des Capucins sur la Cuisance, et de la tour Chaffin, à l'angle sud-est des fortifications[4]. Initialement, la ville louait ses tours, dont la tour Gloriette[5], à des particuliers. Elle est reconstruite sous sa forme actuelle après de graves dommages causés par une violente crue de la Cuisance de 1503. Elle sera ensuite vendue, Jehan Daguet, son dernier propriétaire, la cédant à la ville en 1598. Elle tiendra alors lieu d’hôtel de ville puis abritera un temps une compagnie d'arquebusiers à partir de 1655[6]. En , elle sera un des éléments des défenses de la ville qui permettront de résister aux assauts des troupes françaises (voir le siège d'Arbois)[7].