Le moulin est lié au pont qu´il jouxte. Il remplace un moulin plus ancien qui dépendait vraisemblablement de l´abbaye Sainte-Croix et s´élevait à l´origine sur la rive droite de l´Isole. Suite aux crues de l´Isole en 1776, le site est modifié par la construction d´un pont en pierre et l´élargissement du passage. Un nouveau moulin, spécialisé dans la mouture de céréales, sera reconstruit en 1777 sur la rive gauche, avant d´être modifié à plusieurs reprises, notamment en 1827. A cette date, les propriétaires demandent l´autorisation d´ "agrandir la maison principale et usine". L´établissement apparaît dans la documentation sous des appellations différentes : moulin du roi, moulin de la ville ou encore moulin du pont neuf. Sur un dessin de 1863 figurent la partie inférieure du bâtiment, le déversoir et une série de trois roues. Peu après 1900, un étroit corps de bâtiment en appentis, flanqué d´un corps d´angle en forme de pavillon, est construit sur le cours d´eau. Depuis le début du 20e siècle, l´ensemble a connu plusieurs remaniements importants : modification des façades, transformation des mécanismes et rajout d´une tour latérale à l´est qui occupe une ancienne cour et qui porte les armoiries de la ville, peut-être en référence au décor ancien qui figurait sur l´élévation sud. Cette tour, peut-être le vestige de l´ultime transformation du site en minoterie, masque partiellement une échauguette ancienne, partie d´une construction antérieure au moulin. L´ensemble dont la fonction d´origine n´est plus perceptible, abrite, depuis 1975, une agence bancaire.