Édifiée au XIXesiècle, la chapelle néo-romane actuelle remplace un oratoire construit vers la fin du XVIesiècle. La légende veut que cet oratoire ait été érigé suite à la découverte d'une statuette de la Vierge Marie, trouvée dans un champ par un laboureur, au lieu-dit La Peinière, au nord-est de Saint-Didier, non loin de la Vilaine. Le paysan ramena la statuette chez lui, mais elle disparut et fut retrouvée à l'endroit même de sa découverte. L'histoire se répéta trois fois, et la population décida alors d'ériger un oratoire pour honorer