Les premières traces de l'existence d'une construction située à l'emplacement actuel du château remontent au début du 18e siècle. Pierre Bosviel de Lagoutine (1694-1754) achète une demeure à l’état de ruine en 1733. Celle-ci n’est composée que d’une cuisine, d’un salon en rez-de-chaussée, de trois chambres à l’étage et d’un pigeonnier. En plus de la demeure, la propriété comprenait un bureau, une métairie et une galinière (Joëlle Marsili, 1992). Pierre Bosviel de Lagoutine agrandit la demeure dans sa longueur et ajoute un étage. La demeure est vendue, en 1794, à Pierre Olombel (1752-1812), négociant en laine. La famille Olombel reste propriétaire du château jusqu’au début du 20e siècle. Un plan précis de 1901, nous renseigne sur l’emplacement exact des dépendances dans le domaine. Le château était doté de deux annexes, un bureau, une conciergerie, les écuries et la buanderie. Le toit à balustrade est sans doute ajouté par un des fils de Pierre Olombel.£À partir de la seconde moitié du 19e siècle, la famille Olombel morcelle le domaine. Une première parcelle est vendue à Eugène Cormouls-Houlès qui y construit sa demeure. Le dernier descendant de Pierre, Philippe Olombel (sans enfants), vendit les terrains en lotissement autour de la demeure à des industriels délaineurs (Joëlle Marsili, 1992). Le 20 octobre 1901, le château est acheté par la famille Bonneville.