La maison de la Prévôté, splendide maison carrée de deux étages flanquée à ses angles de quatre pavillons tourelles. Elle subsiste encore dans son entier et semble dater de la fin du XVIe siècle. Le prévôt était chargé de gérer les affaires de l'abbaye. Le nom de l'IIe Barbe provient du latin Insula Barbara, l'île Barbare qui, en se contractant, a donné l'île Barbe. Cette origine pourrait évoquer la présence de druides se livrant à des sacrifices humains avant l'ère chrétienne. Ce nom d'île barbare se réfère peut-être aussi à la constitution géologique de roches cristallines dures de l'île, à son aspect sauvage.