S’il a connu son apogée au XIXème siècle, le site actuel est le fruit d’une longue histoire débutant en 1371 où une première mention d’une forteresse à Sommervieu apparaît dans les comptes des commissaires royaux de Charles V. Les travaux de construction du château pour Bernardin de Saint-François, évêque de Bayeux, débutent en 1579.
De 1729 à 1753, les travaux se poursuivent, les douves et deux étangs sont créés. L’épiscopat de Pierre Jules de Rochechouart ensuite voit l’embellissement du jardin, l’aménagement des grandes avenues et la pose des grilles en fer forgé.
En 1791, le site est vendu comme bien national pour 115 000 livres à Monsieur Dupucé.
En 1833, ses héritiers vendent le bien et les terres agricoles pour 90 200 francs à l’Abbé Boyer, directeur du séminaire de Saint-Sulpice de Paris. Le bâtiment de philosophie est alors construit entre 1833 et 1844.
Monseigneur Robin publie l’ordonnance de création de l’Ecole des Hautes Etudes philosophiques et scientifiques préparatoires à la théologie. Le cloître est construit en 1844 mais ne sera jamais achevé. La pose de la première pierre de la chapelle a lieu en 1851, elle sera consacrée le 25 octobre 1862. Entre 1864 et 1877, la bibliothèque-réfectoire et les communs viendront compléter l’ensemble.
Le séminaire sera fermé en 1906 et dévolu au Département du Calvados en 1914. L’occupation du site sera multiple au XXème siècle : hôpital et casernement militaires, colonies de vacances, lieu de vie de la communauté chrétienne du «Pain de vie »…
Le château sera détruit en 1957-1958 mais les douves seront conservées et la chapelle sera désacralisée à la suite de la vente du bien par le diocèse en 2015.
