Le château, dans son état actuel, remonte au début du XVIème siècle, date à laquelle la famille de Chandio décide de transformer l’austère place-forte en forme de quadrilatère flanqué de tours rondes en une résidence d’agrément. Pour ce faire, et en s’inspirant de ce qu’il avait pu voir en Italie lors des campagnes de Francois Ier, Antoine de Chandio va faire abattre une des courtines, ouvrant la cour sur le parc, et construire deux galeries latérales. Le corps de logis sera quant à lui doté d’une superbe facade au début du XVIIème siècle, lorsque le domaine passera entre les mains de la famille Rabutin.