Elle est avant tout un haut lieu de l’histoire religieuse : d’origine grecque, Vérédème serait arrivé sur l’actuel territoire français à la fin du VIIe siècle. Attiré par la vie érémitique, il s’installe sur la terrasse qui annonce la grotte de la Baume. Comme miracle, on lui attribue la guérison de boiteux ou la fin de la stérilité qui régnait dans la région. Il a donné son nom au site de la Baume dans son ensemble. L’évêque d’Avignon l’appelle pour assurer sa succession à sa mort en 700. Son ermitage primitif serait la plus ancienne construction chrétienne du Bas Languedoc. La chapelle Saint-Pierre se dresse aujourd’hui à cet emplacement. L’appareil en pierres plates, qui se trouve à l’intérieur, date de la période carolingienne et on aperçoit encore les traces d’une fresque du XIVe siècle. Les aménagements restants sont plus récents, de la seconde moitié du XIXe siècle.
À l’été 2013, le Syndicat mixte des gorges du Gardon a achevé la restauration et la sécurisation de l’accès à la grotte, qui passe justement par la chapelle. Intégralement situé sur la commune de Sanilhac, qui à cet endroit-là traverse la rivière, le site comprend deux moulins qui profitaient des résurgences, nombreuses en amont du site, pour obtenir la force suffisante à leur action. L’un, dit de barque renversée, est un moulin conçu pour être éventuellement recouvert par la rivière en crue et fait corps avec le substrat rocheux. Bâti au XVIIe siècle, il ne devait stocker en aucun cas de la farine et du blé car l’humidité aurait pu endommager la matière première. Il servait donc sans doute de meule pour l’entretien du matériel agricole. Suite à la crue de septembre 2002, le moulin a nécessité une restauration que le Syndicat mixte des gorges du Gardon a réalisée en 2007. En face, en rive droite du Gardon, le moulin de la Rasclause s’accompagnait d’un seuil emporté par la crue de 2002, pour le bonheur des poissons. Il est plus tardif, datant sans doute du XVIIIe siècle, et également plus classique dans son architecture pour un moulin à force hydraulique.
