Sur une colline à la sortie du village, le château du XVII ou XVIII e siècle a été rebâtit au XIX à l'emplacement d'un manoir féodal, selon la mémoire locale. Ce manoir est appelé "château de Villiers" par les habitants du village et des villages voisins,probablement à cause de ses deux tours. Nous savons que cet édifice, d'origine non datée, est antérieur au XVIIIe siècle . Il est tres bien indiqué sur la carte Cassini et sur le cadastre dit napoléonien (v 1830) avec son plan actuel (tours, perron…). Quant à son origine médiévale, à ce jour, aucune archive ne l'atteste, même s'il existait une baronnie de Villiers possédée au XIVe siècle par la famille de Villiers.
Baudiau (1860) parle d'un ancien manoir seigneurial et le décrit comme "bien délabré" à son époque. Il évoque une "façade méridionale (…) flanquée de deux tours, qui n'ont plus leur aspect d'autrefois; car l'une était à deux étages et l'autre à trois. Les murs d'enceinte sont en ruine". Dans les années 1920, le manoir et ses dépendances ont été rachetés et étaient utilisés comme corps de ferme (mémoire locale).
Remanié au XIXe et au 20e siècle, il présente aujourd'hui un modeste mais élégant corps de logis rectangulaire à un seul niveau sur rez-de-jardin, percé de baies de style XVIIIe et flanqué de deux tours massives à un niveau, le tout couvert d'ardoises. L'une des deux tours présente un aspect défensif avec ce qui paraît être une canonnière. A côté, on peut également voir un puits, au niveau du sol. La propriété comporte un parc, des dépendances, avec un four à pain. Il existait un pigeonnier (visible sur le cadastre de 1842); en assez mauvais état dans les années 1960, il fut détruit, et un court de tennis le remplace.
Cet élément mérite de plus amples études.