La maison des confesseurs est un petit pavillon posé sur le mur de l'enclos de l'abbaye Notre-Dame-de-Joye. Il est dénommé le "pavillon en dehors" sur la vue cavalière de Boudan en 1707. De plan carré, il se compose d'une pièce pour chacun de ces 3 niveaux. Au rez-de-chaussée, la pièce est aveugle. Elle possède deux portes. Celle du sud a du être percée quand le pavillon est devenu la porterie de la résidence après la Révolution. Cette pièce possède une cheminée. Une fenêtre avait été ouverte dans la muraille côté halage. Elle a été bouchée lors de la restauration de 2008-2011. Le premier étage est accessible via un escalier extérieur qui mène à une loggia. Celle-ci avec sa colonnade et sa balustrade en pierre de tuffeau donne sur le Blavet. On y accède par une porte à double battant. Le 2e niveau se rejoint depuis le 1er par un escalier placé dans la tourelle d'angle Sud-Est. La toiture est en pavillon.

L'ensemble du bâtiment a été aménagé pour servir de résidence d'artiste.