Oorspronkelijk gesticht circa 1850 in het huis Van Doorne met weeshuis aan de Leiebrug op de Markt. Sinds 1865 op huidige plaats, eerst in 18de-eeuws herenhuis van stokerij Delaey bij de Leie, verbouwd tot kostschool en geïncorporeerd als centraal deel van de nieuwe neogotisch getinte bakstenen schoolgebouwen (parallel aan de Leie) in U-vorm, heden nog de zogenaamde oude gebouwen met ingebouwde kapel (ten oosten), gewijd in 1867. Talrijke uitbreidingen in loop van de 19de en de 20ste eeuw. Nieuwe vleugel (parallel aan de Guido Gezellelaan) en nieuwe kapel van 1957.