Costruita nel 1787 dai conti Morelli, famiglia proveniente dal castello di Montesanto frazione di Sellano.
La famiglia era imparentata con la casata de’ Pazzi di Firenze che partecipò alla celebre congiura contro Lorenzo dei Medici.
Da qui il nome.
Del complesso della villa fa parte anche una cappella dedicata alla Madonna Addolorata. L’opera si deve presumibilmente al Landini, architetto eremita di Monteluco, che sul finire del Settecento fondò una scuola per giovani artisti.