En 1769, le château appartient à Mr de Pontcarré. Il n’avait ni galerie, ni créneau, ni tour. En un mot, ce n’était qu’un château Fort. Il avait des communs qui existent encore : un étang où les canards, les cygnes et les oies vivaient en famille. C’est à cause de ses oies que dans l’ancien temps on désignait la commune sous le nom de « Viarmes-Les Oies ».