Op de site van het huidige Museum Calvet voorheen een kardinaal residence - Livre de Cambrai, vernoemd naar vroeger woonde hier de kardinaal Pierre D Aili, Bisschop de Cambrai. In 1719 werd het gebouw verkocht aan françois-rené de Villeneuve, Marquis d Arzela en señor de Martinian.

In 1734, zijn zoon Jacques-Ignace de Villeneuve besloten om uit te breiden hun holdings en de bouw van een nieuw Paleis. De bouw werd begonnen onder de leiding van Len Thomas, maar toen het werd vervangen door de architecten Jean-Baptiste frank en Francesco Frank. De bouwwerkzaamheden waren nog niet klaar tot 1749. In 1802 kocht de mansion onderhandelaar Deletr, die op zijn beurt overhandigde het gebouw te huur autoriteiten Avignon om hier te posten collectie Esprit Calvet. 3 maart 1833, werd het gebouw gekocht door de stad Avignon voor het Museum. Vanaf 1 oktober 1963 herenhuis Villeneuve-Martinian opgenomen in de lijst van de historische monumenten van Frankrijk.

Hier is één van de grootste collecties van schilderijen in Frankrijk. Om een inzameling gestart door een lokale arts (numismatist en bibliofiel en archeoloog) Esprit Calvet, en later, in 1810, liet hij zijn collecties en de bibliotheek van het Museum van de schilderkunst. Tentoonstellingen van het Museum zijn kunstwerken, sculpturen, porselein, maar is vooral geïnteresseerd in het Departement van de schilderkunst, over de periode vanaf de ZESTIENDE tot de twintigste eeuw — van Vasari en Luca Giordano David, Corot, Manet, Soutine en Bonnard.

Hier town house hotel van Villeneuve-Martinian, waaraan toegevoegd een modern gebouw, is de belangrijkste verzameling. Bibliotheek, verzameld kalf en belangrijke collectie van bijna 12 000 munten en medailles werden vervoerd naar een andere locatie in de stad.