Es uno de los más importantes museos
En 1741, el señor de Villeneuve – Martignan encarga al arquitecto Franque la renovación de su mansión, con el proyecto bastante ambicioso de hacer de este la residencia señorial más bella de Avignon. La construcción se termina en 1753 y es espectacular, con un patio de entrada, una galería y un bello jardín. En 1833 la ciudad compra la residencia e instala a dentro el museo Calvet. La colección proviene de una donación de Esprit Calvet, muerto en 1810.
Es el primer museo de la ciudad que contenga también las obras de arte confiscadas a la nobleza durante la revolución francesa. Es uno de los más importantes museos de arte fuera de París, cuya colección fue aumentada por una gran donación de Marcel Puech.