C’est en 1525 qu’a été créée la seigneurie de Noisy, à la suite du partage de la précédente co-seigneurie de Noisy et Bailly appartenant aux de Villeneuve et de Saint-Benoît. Sur les hauteurs du village de Noisy-en-Cruye, l’ancien hôtel fut alors transformé par le nouveau propriétaire, Guillaume Poyet, en château seigneurial. Il sera agrandi plus tard par Albert Gondi.
