Sittplatsen för den romersk-katolska kyrkan flyttade från Rom till Avignon i södra Frankrike 1305, under order av påven Clement V. Cirka 30 år senare började byggandet av ett stort påvligt palats under påven Benedict XII, på platsen för tidigare biskopspalats. Den befästa byggnadens enorma skala kan bara uppskattas personligen. Interiören var lika storslagen, dekorerad med rika gobelänger, fresker och snidade trätak.
Under senare år fungerade palatset som en militärbarack för Napoleons armé, ett fängelse och till och med som stall. Det återställdes som museum 1906. Konstruktionens höjdpunkter inkluderar det 170 fot långa (52 meter) stora kapellet och den centrala innergården, som nu är värd för teater- och musikföreställningar. Slottet lockar besökare från hela världen som kommer för att se slottet, ofta som en del av en guidad tur. Rundturer kombinerar ofta museet med besök på den närliggande vingården Chateauneuf-du-Pape och Provence.