Derrière ses murs et ses tours fortifiés se déploient quelque 15 000 mètres carrés de surface au sol. Il est inscrit au patrimoine mondial de l’UNESCO depuis 1995, et six conclaves s’y sont tenus, élisant des papes de Benoît XII en 1334 à Benoît XIII en 1394.

Le bâtiment est en réalité composé de deux palais accolés. L’austère Benoît XII fit démolir l’ancien palais des évêques et construire le Palais Vieux autour d’un cloître, ses quatre ailes gardées par de hautes tours. Son successeur Clément VI, bien plus fastueux, fit ajouter par Jean de Louvres le Palais Neuf, avec une nouvelle tour et une Grande Chapelle de 52 mètres de long ; Innocent VI et Urbain V achevèrent la cour principale. Les papes retournèrent à Rome en 1377, mais pendant le schisme qui suivit, les antipapes Clément VII et Benoît XIII y vécurent, et le palais resta sous l’autorité de légats pontificaux pendant encore des siècles.

Peu du mobilier d’origine a survécu. Les révolutionnaires saccagèrent le palais, qui servit ensuite de caserne et de prison, ses boiseries arrachées et de nombreuses fresques recouvertes et perdues. Il devint musée national en 1906 et la restauration se poursuit depuis. Ce qui reste du décor peint est la raison de la visite : la chambre du Cerf, cabinet de travail de Clément VI, est couverte de scènes de chasse et de cour du XIVe siècle, et dans la chapelle Saint-Martial et la chapelle Saint-Jean, située en dessous, Matteo Giovannetti a peint la vie de leurs saints en 1344-1345 et 1347-1348, plaçant les récits dans des architectures peintes en trompe-l’œil.

D’autres salles montrent le fonctionnement de la cour pontificale. Dans le Grand Tinel, salle de réception, les cardinaux étaient emmurés pendant les conclaves, avec seulement une petite ouverture pour passer la nourriture. La Grande Audience était l’un des principaux tribunaux du palais, où la justice pontificale était rendue sous une scène peinte du jugement dernier, et avec la Grande Chapelle, cadre des grandes cérémonies de la cour, elle formait le cœur du pouvoir pontifical à Avignon. La cour est l’une des principales scènes du Festival d’Avignon chaque mois de juillet, festival né d’une exposition que René Char organisa dans la Grande Chapelle en 1947.

La visite du palais et des jardins des Papes dure environ deux heures. Une application web utilisable sur n’importe quel smartphone suit les numéros des salles et propose son contenu en six langues, dont l’anglais.