L’abbaye du mont Saint-Éloi, fondée par Saint Vindicien, détruite en 1793, abritait une communauté de chanoines réguliers exerçant une importante activité littéraire.
Les vestiges de l'église abbatiale sont « classés au titre des monuments historiques », par arrêté du 8 juin 1921.