L’élégant Château du Baffy, niché entre les vergers et les champs de Normandie, à cinq kilomètres des plages du débarquement, a eu une histoire mouvementée.
A l’origine, un moulin fonctionnant grâce au courant de la Seulles, était le bâtiment principal du demi-hectare sur lequel réside le château actuellement. Ce dernier fut ensuite construit sur la partie Est du terrain aux alentours de 1735. Une extension fut ajoutée à la fin du XVIII siècle, début XIX.
Cependant, le moulin fut démoli en 1840 suite à un non respect du paiement des taxes. Les ruines du moulin sont toujours apparentes et offrent un étrange contraste avec le superbe château, rappelant les différences entre classes qui existait déjà au XVIII siècle.
Jusqu'à récemment, le Château du Baffy appartenait à des particuliers. Toutefois, son utilisation la plus marquante se déroula durant la seconde guerre mondiale, alors qu’il se trouvait sous occupation SS. La famille Vignerol, soit la Comtesse et son mari, leurs deux enfants, le grand-père, les domestiques ainsi que la gouvernante, propriétaires et occupant du Château durant cette période, refusèrent tous de partir lorsque les allemands décidèrent d’utiliser cette belle demeure comme quartier général. Le journal intime de la Comtesse nous éclaire un peu plus sur ce qu’était la vie sous l’occupation.
Une tranchée de 4.5m sur 50m fut creusée afin que les soldats puissent se réfugier des raids aériens incessants, notamment ceux du 6 juin 1944 vers 4 heures du matin, qui sans qu’ils le sachent, devaient être un premier pas vers leur libération. Il existait deux postes armés allemands très proches du château, soit un à 140m et l’autre à 460 mètres. Les coups de feu tirés par l’ennemi terrorisaient les résidants du château et aussi les villageois. Vers 13h15 ce 6 juin, les troupes alliées arrivèrent à Colombiers sur Seulles en tirant intensément.
Vers la fin du mois, Anne Vignerol rapporte : "les champs étaient recouverts par les troupes, si bien qu’on ne pouvait y voir un brin d’herbe, des milliers et des milliers de troupes et de véhicules débarquaient"..