Sur le cadastre napoléonien de 1828, un bâtiment est représenté à l'emplacement de celui actuel. Il est fort probable que la partie de gauche, plus ancienne, soit celle représentée en 1828. Le rez-de-chaussée de cette partie est en petit moellon de granite alors que le reste du bâtiment est en granite équarri. Il restait donc des vestiges du bâtiment de 1828. Le bâtiment Le relais du Boulet a été bâti à la limite des 19e et 20e siècles.