La destination initiale de cette maison est inconnue. Elle est construite en deux parties : la partie Est date probablement de la fin du 18e siècle ; c'est pourquoi, elle ne semble pas être présente sur le plan d'alignement de la ville dressée en 1785, ni sur celui dressé dans la deuxième moitié du 18e siècle par l'Intendance où ne figure à cet endroit aucune maison en avancée ; si bien que la date de 1750 mentionnée par le cadastre numérisé reste obscure.
Par rapport aux maisons qui l'avoisinent, son avancée sur la rue reste aussi sans explication. Propriété d'un certain Le Det en 1809 qui était visiteur des douanes à Vannes, puis en 1834 de sa veuve qui "l'améliore et l'agrandit", la maison passe ensuite entre les mains de Jean-Marie Davon, officier en retraite en 1844 d'après le cadastre, puis en 1923 entre celles d'Etienne et Yves Beuve-Méry, architecte et épicier en gros qui entreprennent quelques travaux en 1952. Entre Jean-Marie Davon et les Beuve-Méry, d'autres propriétaires se succèdent.
Les augmentations et diminutions cadastrales indiquent clairement une première campagne de travaux en 1836 lorsque la maison appartient encore à la famille le Det même si la comparaison du plan d'alignement de 1841 avec celui du cadastre dressé en 1844 indique aussi entre ces deux dates le rallongement vers l'ouest de la maison. Cet agrandissement latéral entraine aussi la modification des ouvertures de la partie Est : l'ancienne porte, très large dont les jambages subsistent sur la façade et qui donnait accès à la cage d'escalier est remplacée par la porte d'entrée actuelle décalée. On en profite sans doute pour reprendre le décor intérieur des chambres par de nouveaux lambris et installer une cuisine avec une nouvelle cheminée dans la partie ouest rajoutée qui permet aussi par la porte et un couloir d'accéder au jardin. Les écuries postérieures en brique et pierre calcaire sont élevées après cette première vague de travaux. On voit que les portes de la partie ouest rajoutée ont été modifiées pour laisser passer les chevaux.
Les anciens cadastres montrent également que la maison comprend initialement une cour vers le nord qui est reprise par la voirie après 1844.
Dans la deuxième moitié du 20e siècle, 1952 d'après le PC existant ouvert au nom d'Etienne et d'Yves Beuve-Méry, l'ouverture d'une large porte de garage à la place de la fenêtre figurant sur la vue aérienne des années précédentes a achevé de dénaturer la façade sur rue. Côté jardin, la fenêtre de la salle-à-manger est agrandie vers 1930.
Les matrices cadastrales de 1809 indiquent monsieur Le Det, visiteur des Douanes à Vannes, propriétaire de la maison.