C'est le 28 mars 1575 que François Lambert, écuyer et conseiller du roi, auditeur en sa chambre des comptes, acheta la terre de Cambray au noble d'Oinville, seigneur du Puiset. A gauche, se situe le vieux château qui date du 15ème siècle. La partie centrale, de pierre et en pierre de taille pour les piliers d'angle a été édifié sous Louis XIV, c'est-à-dire entre 1650 et 1700. Les deux ailes ont été bâties peu après. A droite, la chapelle dont la construction a débuté en 1805 est consacrée à Saint Charles de Borromée. C'est au courant du 19ème siècle, qu'ont été ajouté les deux tours octogonales. Quant aux communs, c'est Charles de Cambray qui les a construits en 1901. Le parc à la française, est dessiné selon un cadran solaire. Au centre se trouve l'une des sources de la Conie.