La erección del primer núcleo del castillo Sforzesco se debió a Galeazzo II, que surgió adosado a la muralla comunal. Luego fué ampliado por sus sucesores Giovanni Maria y Filippo Maria. Después de haber sido destruído por los milaneses durante la República Ambrosiana (1447-50), Francesco Sforza emprendió su reconstrucción para subrayar la continuidad dinástica entre su poder y el dominio visconteo, determinada por su matrimonio con la hija de Filippo Maria, Bianca Visconti.
Alberga en la actualidad a diversas sedes de instituciones culturales como la Biblioteca Cívica de Arte, la fototeca Cívica, la Colección Cívica Bertarelli de Grabados, la Escuela de Arte Cívica, las Colecciones Cívicas de Arte Antiguo y de Arte Aplicado, entre otras. En el Museo de arte Antiguo se puede admirar el vasto patrimonio publico con cerca de 32.000 obras de pintura, escultura y diseño.