Vietoje dabartinio Muziejaus Кальве anksčiau buvo кардинальская rezidencija - Ливре de Камбре, pavadintą taip pagerbti kažkada жившего čia кардинала Пьера D Айли, vyskupas de Камбре. Į 1719 metais pastatas buvo parduota François-René de Вильневу, маркизу d Арзелье ir сеньору de Мартиньян.

Į 1734 m. jo sūnus Jacques-Игнас de Вильнев nusprendė plėsti savo nuosavybės ir pastatyti nauji rūmai. Statyba buvo pradėta vadovaujamas Tomo Лэне, bet tada jo сменили architektai Jean-Батист Frankas ir Francesco Frankas. Statybos darbai buvo baigti tik 1749 metais. Į 1802 dvarą įsigijo негоциант Делетр, kuris, savo ruožtu сдал pastatas nuoma valdžiai Авиньона, kad vieta čia kolekcijos Эспри Кальве. Kovo 3 d., 1833 pastatas buvo выкуплено savivaldybės Авиньона po muziejus. Nuo spalio 1 d 1963 metų miesto dvarą Вильнев-Мартиньян įtrauktas į sąrašą istorinių paminklų Prancūzijoje.

Čia saugomas vienas iš didžiausių kolekcijų tapybos Prancūzijoje. Rinkti kolekciją pradėjo vietinis gydytojas (нумизмат, библиофил ir archeologas) Эспри Кальве, o vėliau, 1810 m., jis завещал savo kolekciją ir biblioteką музею tapyba. Экспонатами muziejaus yra taikomojo meno kūrinius, skulptūra, porceliano, tačiau itin įdomus skyrius tapybos, apimantis laikotarpį nuo XVI iki XX amžius — nuo Вазари ir Luko Джордано iki Skulptūra, Koro, Мане, Сутина ir Боннара.

Čia, miesto gyvenamajame Вильнев-Мартиньян, prie kurio buvo пристроены šiuolaikinių pastatų, yra pagrindinė kolekcija. Biblioteka, surinkta Кальве ir didelė kolekcija iš beveik 12 000 monetų ir medalių buvo vežami į kitą vietą).