Het Kasteel van Poppi is ongetwijfeld één van de meest belangrijke monumenten van heel Casentino. Het is een van oorsprong middeleeuwse structuur die perfect bewaard is gebleven, waarvan de geschiedenis onverbreekbaar verbonden is met die van de graven Conti, de belangrijkste feodale familie uit de regio.

De eerste geschreven berichten over het kasteel dateren uit 1191, maar zijn architectuur doet vermoeden dat het tenminste twee of drie eeuwen eerder is gebouwd.

De vierkante toren die de constructie domineert stelt de originele kern voor, waar omheen de andere gebouwen werden gebouwd binnen de verstevigde muren. De toren werd in de negentiende eeuw gerestaureerd, nadat het door een blikseminslag werd verwoest. Er wordt vanuit gegaan dat Arnolfo di Cambio de inspiratie uit de toren van het kasteel van Poppi haalde om het Palazzo Vecchio in Florence te realiseren.

Gedurende de eeuwen heeft het kasteel verschillende restauratiewerkzaamheden ondergaan. Allereerst in 1272, toen naast het al bestaande gebouw een bekisting werd gebouwd. Tegenwoordig zijn de constructies verenigd, maar oorspronkelijk waren ze gescheiden van elkaar en verbonden door middel van een ophaalbrug. Tegelijkertijd werd ook begonnen met de constructie van de tweede vleugel, aan de overkant van de toren.

Een tweede ingrijpende restauratie werd in 1470 begonnen en betrof hoofdzakelijk de binnenplaats en het buitengedeelte. Tot slot werd in de negentiende eeuw een groot deel van het kanteelwerk herbouwd.