Die von Vignola entworfenen und um 1583 fertig angelegten Gärten stellen eine überaus gelungene Umwandlung des Festungsbaus in eine Villa dar, die, umschlossen von einer hohen Mauer, wie ein Geheimgarten wirken. Hinter dem Palast, auf der Höhe der Belle Etage, breiten sich fächerartig zwei große höher gelegene Bereiche aus: der Winter- und der Sommergarten. Sie sind über Brücken, die noch aus damaliger Zeit stammen und über den Wassergraben führen, zu erreichen. Im Wintergarten befindet sich der malerische Tartaren- Brunnen, im Sommergarten der Brunnen der Satyrn. Beide sind durch Hecken in 16 Felder eingeteilt. Bemerkenswert sind die vier Horen- Statuen, die am Ende der Brücken, die zum Palast führen, als Sonnenuhr dienen.