La construction du bâtiment actuel, à la place d'un édifice plus ancien, a débuté en 1499. La plus grande partie en a été achevée en 1566 ; des travaux plus mineurs se sont poursuivis jusqu'au milieu du XVIIe siècle. Plusieurs campagnes de restauration ont eu lieu au XIXe siècle2.
Le monument est classé au titre des monuments historiques depuis le 28 décembre 19103.
Autrefois dédiée à Saint Vigor, l'église porte son nom actuel, Notre-Dame des Arts, depuis 18962.