La configuration du site évoque celle d’une villa romaine, ou peut-être d’un camp de repos pour voyageurs qui venaient de Rome afin de se rendre à Autun. Une hypothèse probable compte tenu de la proximité d’une voie antique, en partie détruite aujourd’hui.
La famille NANTON, durant les brillantes années de la Renaissance, marqua l’histoire du Domaine, alors Seigneurie Foncière sans justice, sous l’autorité des Sires de Beaujeu.
Au cours du règne des rois Louis XIII et Louis XIV, la lignée des NANTON fit place à celle des SAINTE-COLOMBE. Au XVIIIème siècle, la riche noblesse de l’époque, descendante de drapiers Lyonnais, entreprit l’embellissement de PIZAY qui se poursuivit au XXème siècle.