Der von seinen Dimensionen her bescheidene Palazzo, der nach dem Vorbild der Vorstadtvillen entstand, war die Privatresidenz des Herzogs. Der Palast war schlicht in Weiß verputzt, erhielt aber ein kostbares Gesims aus Eichenholz. Wände und Decken wurden von Bernardino Campi (1522-1591) und seinen Schülern üppig verziert. Die Grande Galleria mit ihren 97 m Länge gehört zu den längsten, die in der Renaissance erbaut wurden.