这里原称“摩耶精舍”，始建于1976年，张大千先生于1983年完成一生中最后的一副著作《庐山图》后童年4月病逝，张大千先生病逝后，后代子孙将摩耶精舍与其绘画品等全部捐出，由国立故宫博物院规划成立张大千纪念馆并管理。