C’est en 1781 que Maurice de Faventine acheta le château de Lavagnac et ses terres.
Le Château passa ensuite à sa nièce qui deviendra la Vicomtesse Daudé d’Alzon.
La Famille d’Alzon vécut au château de Lavagnac avec ses trois enfants.

Son fils, le Père Emmanuel d’Alzon partit le 14 Mars 1832 de Lavagnac pour rentrer dans le diocèse de Nîmes, avant de devenir le fondateur et premier supérieur général des Augustins de l’Assomption, ou Assomptionnistes. Le Père Emmanuel d’Alzon venait régulièrement à Lavagnac pour voir sa famille. Sa Sœur Marie Françoise épousa Anatole de Puységur.
A sa mort, c’est Jean de Puységur son fils qui va prendre en charge le domaine. Après avoir tenté la séréciculture (ver de soie), ll va développer peu à peu la viticulture. Il se marie en août 1872 avec Clotilde Pourroy de l’Auberivière de Quinsonas.
De ce mariage trois filles verront le jour : Marie, 1873-1921 – Alix 1875-1954,et Isabelle 1883-1965,