Le château de Visconti, ou Castello Visconteo, a été construit par Galeazzo Visconti entre 1360 et 1365. Les visiteurs traversent des salles qui présentent encore de belles fresques de l'époque des Visconti et Sforza. L'aile nord est maintenant manquant. C’était autrefois la résidence de Duke, faisant face au parc Visconteo et reliant la Certosa (Chartreuse). Cependant, l'harmonie du château - l'un des grands exemples de l'architecture lombarde du gothique tardif - est intacte.

Après la Seconde Guerre mondiale, le château abrite les musées de la ville de Pavie. Les musées comprennent les collections suivantes: la section archéologique et du haut Moyen Âge avec ses superbes vestiges archéologiques romains, gothiques et lombards, les sections romane et renaissance, la galerie Malaspina comprenant des œuvres du XIVe au XVIe siècle et une section consacrée aux XVIIe et XVIIIe siècles. siècles, la galerie du XIXe siècle, la collection Morone, le musée du Risorgimento, la Gipsoteca, le musée ethnographique Robecchi Bricchetti et un espace accueillant des expositions temporaires. Suite à la rénovation de l'écurie du château, les musées de la ville se sont enrichis d'un nouvel espace d'exposition.