El castillo Visconteo de Pavía fue construido entre 1360-1366 por orden de Galeazzo II Visconti —entonces señor de Milán (r. 1349-1378) junto con sus hermanos Mateo II y Bernabé—, quien trasladó allí su corte después de la conquista de Pavía por los milaneses. Luego el edificio fue la sede de la corte tanto de Gian Galeazzo (r. 1378-1402), primer duque de Milán desde 1395, como, hasta 1413, de su hijo Filippo Maria (r. 1412-1447).