Il palazzo conserva ancora oggi arredi, suppellettili e ricordi della famiglia a cui è appartenuto.
Fu costruito su tre piani da Domenico Trifogli nella prima metà del XVIII secolo, in stile tardo-barocco. Lo scalone è adornato di sculture opera di Francesco Janssens.
Le sale più importanti sono il "salotto rosso", che include la quadreria con i ritratti dei Tozzoni, la "camera dell'alcova", caratterizzata dallo stile rococò e il "salotto del papa", così intitolato in onore di Papa Benedetto XIV. La biblioteca, ricca di volumi antichi, e l'archivio di famiglia sono situati al piano terra. La raccolta di quadri include circa 170 dipinti, opera per lo più di artisti bolognesi o romagnoli. I più antichi risalgono al XVI secolo.