Une partie de l'emplacement actuel qui appartient d'après les archives avant 1662 aux familles Guydo et Le Meilleur était occupée au Moyen Age par la maison de Robert de Callac, maître d'hôtel de la Duchesse. Le bâti est alors composé d'une large maison en pan de bois donnant sur la place du Poids Public "vis-à-vis le moulin des dites Lisses" avec cour, galerie, écurie. Avant l'acquisition de l'ensemble en 1665 par Julien Mynier, marchand, auprès de François Le Meilleur, les propriétaires procèdent à la vente d'un tiers de la maison en 1662 pour 1420 lires. D'après le procès-verbal dressé en 1666 sous l'égide des deux experts Laurent Le Ray et François Cosnier, Julien Mynier forme le projet de démolir et de rebâtir les parties arrières pour agrandir vers le nord la maison. Il est aussi envisagé des travaux de restauration sur la maison proprement dite comme c'est souvent l'usage à l'époque : reprise des façades, rénovation des couvertures accompagnée probablement d'un changement de toiture. Le marché passé entre Julien Minier et François Garderel, terrasseur, confirme l'engagement des travaux en 1667. La description des lieux fournie par la réformation en 1677 situe la porte d'entrée de l'édifice vers l'est et ajoute de ce côté l'existence d'un jardin correspondant aujourd'hui à la voirie. Vers l'ouest, la présence d'une venelle commune est aussi certifiée entre la maison et les deux de monsieur de Francheville qui la longent de ce côté.
La restauration de l'hôtel effectué dans le premier quart du 21e siècle a mis à jour des éléments du 15e siècle au niveau du bâti initial qui donne sur la place du Poids Public (cheminée, mur gouttereau nord homogène avec ouvertures). De plus, les traces de fixation des aisseliers sur les poutres du rez-de-chaussée indique un encorbellement primitif de la façade place du Poids Public mis par la suite à l'aplomb du rez-de-chaussée. La réfection de la charpente datée 17e siècle a montré la réutilisation d'un élément de pan de bois, provenant peut-être de la façade.
L'observation des façades montre deux campagnes de travaux : la façade place des Lices correspondant typologiquement au 17e siècle, tandis que les ouvertures de la façade sud place du Poids Public sont reprises au début du 18e siècle, travaux dus peut-être au propriétaire suivant, Jean Alquier, sieur de Mézerac, capité à cet endroit en 1733. Cette famille conserve l'hôtel jusqu'en 1759 date à laquelle il est vendu à la famille Le Mintier de Lehellec.
En 1881, l'édifice est vendu à monsieur Le Corvec, épicier puis il passe entre les mains de Richard qui le revend en 1925 à monsieur Allioux. Ce dernier entreprend en 1927 de transformer la façade est de l'hôtel au goût du jour sur les plans de l'architecte Alfred Charron. Seule, une partie du projet est réalisée qui correspond à la moitié nord de la façade est.
La dernière restauration de l'édifice date de 1978 où l'intervention la plus importante a consisté par du béton à consolider l'échauguette. Jusqu'en 2015, cette dernière a été protégée par un dispositif métallique dans l'attente de travaux.
Chargée d'études à l'Inventaire