Villa Oliveto erhebt sich auf den Hügeln des Valdichiana, etwas außerhalb der Fraktion Oliveto, nicht weit entfernt von Civitella in Val di Chiana. Wie auch andere Villen im Gebiet von Arezzo, wurde Villa Oliveta von den Grafen Barbolani di Montauto erbaut.

Wahrscheinlich auf einem ehemaligen Bauernhaus errichtet, ist das derzeitige Gebäude das Ergebnis einer Reihe von Neugestaltungsarbeiten, die im 19. Jahrhundert durchgeführt wurden. Die interne Aufteilung der Gebäude folgt der für die Herrschaftshäuser typischen, mit der Adels-Etage, dem oberen Stockwerk, das dem Dienstpersonal zugeteilt war und Räumlichkeiten zur Ausübung der typischen landwirtschaftlichen Tätigkeiten im unteren Stockwerk. Das Gebäude ist umgeben von einem Park und von Olivenhainen.

Im Laufe des 2. Weltkrieges wurde die Villa Oliveto als faschistisches Konzentrationslager benutzt.