La mention au sud-est du manoir, d´une « motte du haut-fournet », précédée au nord de son « poulpry » (en breton pourpris), atteste de l´ancienneté de l´occupation du site : Un Jehan du Fournet est mentionné à la fin du 14e siècle comme compagnon d´armes de du Guesclin. Roland du Fournet comparait à la montre de 1480. Le lieu appartient en 1500 à Gilles du Fournet. Une pierre de 1560 remployée dans la maçonnerie des communs conserve le souvenir d´un ancien logis disparu. Les archives généalogiques mentionnent également le mariage en 1601 à Saint-Judoce de Charles du Fournet, sieur du Fournet, de la Metrie, de la Noë Trumier avec Jeanne Busnel. Actuellement il ne subsiste pas ou peu de vestiges pouvant remonter au 16e siècle. Le cadastre de 1844 fait apparaître le tracé d´anciennes douves qui à cette époque n´étaient déjà plus en eau. Le colombier circulaire (détruit) situé à proximité de l´entrée pouvait remonter à ces périodes anciennes. Le manoir est entièrement reconstruit au début du 18e siècle, suite au mariage de Pierre-Hyacinthe du Fournet et de Marie-Melaine de Farcy, le 11 février 1734. Une lucarne sur les communs porte la date de 1735 et indique que les travaux devaient être terminés pour le logis principal. Ce dernier suite aux dommages de la Révolution est modifié au début du 19e siècle : la toiture est rabaissée, la partie centrale est soulignée par un grand fronton triangulaire percé d´un oculus et une corniche à denticules est crée sur le pourtour des façades. La date de 1838 inscrite sur le linteau de la cheminée du rez-de-chaussée de l´aile arrière correspond à cette campagne de travaux, de même que les aménagements intérieurs : escalier, lambris, porte avec jour d´imposte cintré. La chapelle du 17e ou du 18e siècle a également été transformée au 19e siècle, comme en témoigne la structure de charpente du clocher datée de 1801 et le décor peint, d´accompagnement de l´autel, daté de 1800. L´évêque en demandait la réouverture le 20 brumaire an XIII (novembre 1804). Elle semble transformée en orangerie peu de temps après, vraisemblablement à la suite des travaux de 1838 qui affectent le logis principal. Les abords du château sont remaniés vers le milieu du 19e siècle par la suppression de l´avant-cour et la création d´un chemin desservant directement la métairie du Haut-Fournet. Le colombier est alors détruit et un logis secondaire à usage de conciergerie est édifié dans l´ancienne avant-cour, devant l´ancienne grange en 1861, date à laquelle on comble les douves au pied du mur de la cour principale.