La construction actuelle de la Ville-Glé doit remonter au début du 19e siècle, mais elle en remplaça une autre. La première est en effet plusieurs fois mentionnée dans les archives paroissiales et notamment au recensement de 1664. Paul Banéat cite également le manoir de la Ville-Glé reconstruit au début du 19e siècle et qui avait autrefois une chapelle. En 1971, lors d'une précédente enquête de l'Inventaire, la date de 1821 est relevée sur une poutre. Il semblerait que la jolie fenêtre très travaillée de la dépendance soit un remploi de l'ancienne chapelle Saint-Michel située entre le village du Gros-Chêne et de la Ville-Glé.