La tradition locale veut que sur ce terrain se soit réfugiée la reine Radegonde (519-587), alors poursuivie par les soldats du roi Clotaire Ier : l’avoine aurait miraculeusement poussé pour dissimuler la souveraine.
En réalité la chapelle aurait été construite à l’époque où Richard Cœur de Lion fonda le monastère de Prémontrés au Lieu Dieu, en 1190. Si l’édifice a été endommagé durant les guerres de Religion, en 1568, il n’eut pas en revanche à subir les destructions révolutionnaires.
Laissée à l’abandon, la chapelle se retrouva à l’état de ruine en 1850, avant d’être reconstruite à l’identique par l’abbé Joseph Orceau. La première pierre fut bénie le 15 avril 1863 et la chapelle inaugurée dès le 22 juillet suivant. L’évêque de Luçon fit don l’année suivante d’une chasse de style gothique.
La chapelle n’est ouverte que pour le pèlerinage de Sainte-Radegonde en août et pour les Journées Européennes de Patrimoine en septembre.