La Chiesa della Madonna dell’Oliveto, edificata alla fine del 1500 grazie al contributo dei fedeli e forse utilizzando materiali del vicino monastero di San Vincenzo in rovina, deve il nome a una “Madonnuccia” miracolosa originariamente sulle rive del lago, poi salvata sopra un ramo di ulivo. L’immagine della Madonna con Angeli, attribuita a un collaboratore di Caporali, si trova ancora oggi sull’altare maggiore.

A croce latina, il tempio ha tre altari per lato ed è stato arricchito dalla famiglia Della Corgna. La facciata in pietra arenaria è semplice, con porta ornamentale e statua della Vergine con Gesù. All’interno si conservano numerose opere d’arte, tra cui un altare in pietra serena, l’affresco della Madonna con Gesù e angeli e un’acquasantiera scolpita.

Secondo la tradizione, il miracolo della Madonna fu rivelato a una pastorella storpia che, guarita, favorì la costruzione della chiesa, dando origine a pellegrinaggi e celebrazioni.