Il palazzo, di raffinata fattura, è composto da più fronti realizzati in epoche diverse e conserva una torre merlata del XIV sec. Le forme attuali dell’edificio si devono agli interventi realizzati nel XVIII sec. su committenza di Diodato ed Agatopo Toppi. Nella volta dell’androne si conserva un affresco riproducente lo stemma della famiglia. Da notare, prospiciente sul piccolo cortile interno, lo scalone a doppia rampa ornato da colonne doriche e decorazioni in stucco.
