Es wurde 1756 von Bologneser Alfonso Torreggiani für den Markgraf von Cavriani erbaut und ist ein monumentaler Bau mit strengen architektonischen Einteilungen und Verzierungen.
Gegenüber dem Palast befindet sich ein Garten, der 1826 für die Cavriani von Giovanni Battista Vergani entworfen wurde, einem bekannten Vertreter des Mailänder Neoklassizismus und Schöpfer mehrerer bedeutender Projekte in Mantua und der Provinz in der ersten Hälfte des 19. Jahrhunderts.

Im Jahre 1835 ließ marchese Luigi Cavriani eine Marmorstatue von Virgil im Garten gegenüber seinem Palazzo errichten. Sein Bildhauer Stefano Gerola aus Mailand war auch für die dreizehn Büsten von Mantuanern verantwortlich, die für ihren Beitrag zu Briefen, Wissenschaft und Kunst auf den Säulen der Geländer bekannt waren. Zu den Portraits gehören Ippolito Capilupi, Baldassarre Castiglioni, Filippo Cavriani, Marcello Donati, Teofilo Folengo, Kardinal Ercole Gonzaga, Marschese Francesco II Gonzaga, Duca Vespasiano Gonzaga, Pietro Pomponazzo, Antonio Possevino, Battista Spagnoli, Jacopo Street.
Es war ein Marschese Cavrianis deutlich geäußerter Wunsch, ein modernes Denkmal für Virgil zu erbauen, nachdem es 1821 an der Piazza Virgiliana entfernt worden war.