Costruito nel 1452 da Paolo Lampugnani, ricco mercante milanese, viene ampliato in epoche successive. La pianta quadrilatera era originariamente cinta da un fossato alimentato artificialmente da una rete di canali e attraversato da un ponte levatoio. Il cortiletto interno conserva tracce di antiche decorazioni ad affresco, presenti anche nelle sale del piano terreno. Dal 1905 proprietaria del Castello è la famiglia Cremonesi.