Cette chapelle, appelée aussi chapelle du couvent de la Visitation, fut construite en 1714 sur les plans de l'architecte Joyneau mais les travaux de transformation de 1776 de la façade et de l'intérieur (les deux chapelles et la coupole de la croisée) seraient de Soufflot.
Il est peu probable qu'il ait suivi l'exécution des travaux lui-même car il était alors fort occupé à l'édification de l'église Sainte-Geneviève à Paris (l'actuel Panthéon).
Elle est actuellement fermée aux visiteurs suite à un arrêté de péril.
