I stället för det nuvarande museet Calvet var tidigare en kardinal bostad - Livre de Cambrai, uppkallat efter den en gång bodde här D'Ayli Pierre Cardinal, biskop de Cambrai. År 1719 byggnaden såldes till Francois-René de Villeneuve, markisen de seigneur d'Arzele och Martignano.

År 1734 sin son Jacques-Ignace de Villeneuve beslutat att utöka sitt innehav och bygga ett nytt slott. Konstruktion börjades under ledning av Thomas Laine, men sedan bytte arkitekter Jean-Baptiste Francesco Frank och Frank. Byggarbetet avslutades endast 1749. 1802 köpte han ett hus Deletro köpman, som i sin tur överlämnade byggnaden att hyra Avignon myndigheterna att placera samlingen här Esprit Calvet. Mar 3, 1833 byggnaden köptes av kommunen Avignon för museet. Den 1 oktober 1963 hus Villeneuve-Martignano på listan över historiska monument i Frankrike.

Det inhyser en av de största samlingarna av målningar i Frankrike. Samla samling startade en lokal läkare (numismatiker, bibliofil och arkeolog) Esprit Calvet, och senare, år 1810, efterlämnade han sin samling av målningar till museet och ett bibliotek. Museiföremål är verk av brukskonst, skulpturer, porslin, men mycket intressant målning avdelning, som omfattar perioden från XVI till XX-talet - från Vasari och Luca Giordano till David, Corot, Manet, Bonnard och Soutine.

Här, i hus Villeneuve-Martignano, till vilken tillsattes till moderna byggnader, är det den viktigaste samlingen. Bibliotek, Calvet och samlade en betydande samling av nästan 12 000 mynt och medaljer flyttades till andra platser.