L'évêque Gilbert de Choiseul fit construire l'ancien séminaire entre 1688 et 1692. Sous le régime français, le bâtiment devint un orphelinat. A partir de 1818, il fut transformé en un hospice pour incurables et malades mentaux. En 1821, le bâtiment et notamment la chapelle fut réaménagé par l'architecte Bruno Bernard dans le style néo-classique. De 1971 à 1983, le bien fut laissé à l'abandon.Il a été réhabilité de 1984 à 1989 par le CPAS pour y installer notamment des logements pour personnes âgées, des logements supervisés pour jeunes, un centre de jour pour handicapés, des salles de réunion, ... La chapelle accueille des activités pluridisciplinaires.De 2000 à 2006, dans le cadre d'un projet de réinsertion socio-professionnelle, un jardin "régulier" (d'agrément) et un jardin "nourricier" (potager, plantes médicinales, ...) ont été aménagés sur le vaste terrain contigu (côté avenue Bozière).