Le château Renaissance conserve un air véritablement seigneurial ; bien qu’il soit toujours resté inachevé et que la partie construite ait été mutilée. En 1727, la seigneurie de Vallery fut donnée en partage avec le comté de Sens à Elisabeth Alexandrine de Bourbon, connue sous le nom de Mademoiselle de Sens, qui démolit une partie du château, et, en 1747, le vendit. Quant au vieux portail, malgré sa fenêtre à meneaux, il a été de ce côté beaucoup trop modernisé.