
Le château est d’époque Louis-Philippe. Il fut construit par le comte de Charbonnières, sur un ancien manoir. Celui-ci en avait fait un rendez-vous de chasse. Auguste Rousseau de Chamoy, le comte, était maire de Saint-Lubin. C'est son épouse qui fit restaurer à ses frais la chapelle de Saint-Lubin.
Le manoir est déjà mentionné en 1535, il appartenait à Marin d'Anceau, seigneur de Béthonvilliers. Il passa ensuite entre les mains de la famille de Rohard. Le nom de Goguerie vient très certainement de la famille "La Gogué" qui était présente dans la région vers le XIVe siècle. Ceci de la même façon que la ferme de la Graffardière obtint son nom, étant le fief familial des Graffart.
Le château surplombe des étangs qui sont la source de la Ronne, rivière qui passe à Coudray et rejoint l'Huisne à Nogent. Il dépendait autrefois du village de Saint-Lubin-des-Cinq-Fonts. La façade a été refaite récemment.