I caratteri più antichi rintracciabili in questa Villa, di architettura semplice e signorile, indicano la sua origine attorno al XV secolo. A questa epoca risalgono i locali che si estendono nel sottosuolo della villa, ognuno con specifica destinazione: la cantina, la tinaia, l'orciaia, il frantoio a trazione animale, il pozzo, la cucina dotata di caminetto e forno a legna. Vi è anche un interessante ed antichissimo passaggio segreto sotterraneo che porta nella vicina Casa da Signore dopo avere attraversato il giardino e che ha dato luogo a leggende di amori segreti, ma che più probabilmente ebbe funzione difensiva.

Ad un sostanziale restauro subito dall'edificio tra la fine del 1500 e i primi del 1600 risale probabilmente l'attuale raffinata sistemazione interna di gusto rinascimentale con influssi baroccheggianti. Tutta la struttura è ben conservata ed in particolare il salone con un importante lavabo e un bellissimo ed imponente caminetto in pietra serena.

Si tramanda che la Villa fu in origine uno dei ritrovi di caccia che la famiglia Medici aveva in Toscana, essendo al tempo la zona molto boscosa e ricca di fauna. Successivamente fu dimora dell'antica famiglia dei Capacci e quindi residenza della nobile stirpe dei Gaci, come indicato nello stato d'anime della chiesa di Colonnata dell'anno 1686, ma certamente anche da molto prima. Alcuni documenti di archivio e gli stemmi di pietra esistenti sulle murature esterne della Villa, raffiguranti una mano tesa sul fuoco, ne sono testimonianza. Appartenne alla famiglia dei Gaci quell'Alessandro che, follemente innamorato di Isabella dei Medici (figlia del Granduca Cosimo I e data in moglie a Paolo Orsini) per non causare la di lei rovina volle ritirarsi in un convento di cappuccini. Ma ciò non valse: l'infelice Isabella, passata ad altri amori, la notte del 15 luglio 1576 fu strangolata con una corda dal marito nella villa di Cerreto. Da questa tragedia il Guerrazzi ne ricavò un celebre romanzo.

Come tutte le più importanti famiglie toscane, anche i Gaci seguirono la moda, iniziata alla corte dei Medici, della coltivazione degli agrumi in grandi vasi di terracotta e fecero quindi edificare a lato della Villa un'ampia limonaia per il ricovero invernale delle piante. Nel giardino esistono ancora oggi piante di agrumi ultracentenarie. I Gaci mantennero ininterrottamente il possesso della Villa fino al 1809, qualche anno dopo la acquistò la nostra famiglia ed oggi è la nostra abitazione.