Le Ville Pontificie del complesso di Castel Gandolfo sono state costruite sui resti di quella che era la sontuosa residenza dell'imperatore Domiziano, architettata probabilmente da Rabirio; resti che sono visibili e che costituiscono uno degli aspetti più interessanti della visita. Estremamente suggestivo è il criptoportico, una galleria semi ipogea che faceva parte delle strutture della villa imperiali, che venne disegnata e riprodotta dal Piranesi nel Settecento. I giardini con le sue fontane, parterre estesi per 55 ettari (dei quali circa 30 ettari a giardino monumetale e circa 25 destinati alla produzione agricola) formati si sono formati a partire dai primi del Seicento. Primo pontefice a stabilirsi nel Colli Albani fu papa Paolo III Farnese nel Cinquecento mentre circa un secolo dopo papa Urbano VIII Barberini decise di stabilirsi proprio a Castel Gandolfo. Poco dopo suo nipote, Taddeo Barberini, dopo aver acquistato tra il 1628 ed il 1631 due proprietà, inizio i lavori di creazione dei giardini. Si ammireranno il Viale dei Lecci, il Giardino del Belvedere, il giardino della Piazza Quadrata, il giardino della Magnolia, lo splendido criptoportico romano, i resti di una strada romana. E' inoltre presente un antiquarium che conserva, in un affascinante allestimento, numerosi reperti e sculture classiche.