Il castello, contemporaneo di quello sito a Trezzo sull'Adda, venne fatto erigere dal signore di Milano Bernabò Visconti e dalla moglie Beatrice Regina Della Scala, intorno al 1355-1370 come residenza di campagna per la caccia, grande passione di Bernabò.

La costruzione ha la tipica forma dei castelli di pianura dell'epoca; pianta quadrata con quattro torri angolari, cortile interno con porticato scandito da archi acuti e loggiato superiore. All'esterno sono visibili le numerose finestre, monofore al piano terra, in origine destinato alla servitù, bifore al piano superiore, riservato ai nobili. Il lato est del piano inferiore era originariamente aperto come una sorta di secondo porticato ed era adibito a salone per i banchetti estivi (attualmente, corsi e ricorsi storici, è utilizzata dalla mensa della scuola agraria).

Il castello al momento della realizzazione venne completamente affrescato, persino nella zona delle stalle, ora utilizzate come biblioteca comunale. La decorazione del castello era composta da svariate forme geometriche, tarsie a imitazione del marmo e da alcune figure umane, variando da vano a vano. Nelle forme geometriche vennero rappresentati gli stemmi araldici dei Visconti e dei Della Scala.

Alla morte di Beatrice Regina Della Scala, Bernabò sposò una Savoia e in suo onore fece ridipingere gli stemmi scaligeri con quelli della casata Savoia. Passato agli Sforza e in seguito ad altre nobili famiglie, è attualmente di proprietà del Comune.