La légende rapporte qu’avant le XI siècle, Sainte Anne apparut en haut d’un rocher, à une jeune bergère, Anna Bagnis et lui désigna l’endroit ou elle demandait que soit construite une chapelle. Le plus ancien écrit daté de 1307 cite l’hospice Santa Maria di Brasca, sur ce périlleux sentier muletier de haute montagne. En 1443 un écrit dit que ce sanctuaire est dédié non plus à Notre Dame, mais à Sainte Anne, sa mère.

Dès les débuts du XVIème siècle, des chroniques rapportent qu’un prêtre desservant vivait à demeure et qu’une « multitude de peuple » montait à la chapelle pour la fête de Sainte Anne, et y apportait la nourriture et tout le nécessaire pour que le prêtre et ses gens puissent y passer l’hiver et secourir les voyageurs.

Au cours de ce même siècle l’évêque d’Apt offrit une petite relique de Sainte Anne, toujours présente, en ayant traversé toutes les invasions et destructions de l’histoire.