著名建築師貝聿銘受利榮森博士委託，為中大文物館的設計提供寶貴意見。1971年秋，佇立於校園中心，毗鄰大學行政樓和大學圖書館的文物館隆重開幕。

文物館最初的收藏方向分為兩方面：一為可作教學用途的樣本，例如碎片和殘件；二為具備特殊研究價值的藝術品。拓本屬於數百年來一直獲學者關注，市場價格又相對低廉的藝術門類。《西嶽華山廟碑》（順德本）便是最早入藏文物館的藝術品之一，同時也是本館歷來的重要收藏（73.678）。1973年，即此碑購入同年，收藏家簡又文先生有意轉讓其名下藏品。簡氏是歷史學家，民國時期曾任職國民黨政府。憑着興趣、交遊和學養，他系統地收藏了逾千件明清廣東書畫以及嶺南畫派創始人的代表作，其中包括過百件高劍父的作品（73.611及73.831）。為保藏品完整，簡氏願以極優的價格轉讓予文物館。本館首任館長屈教授深明這批藏品的重要性，特與利公發起募捐，最終得以悉數購藏，本館藏品的基礎就此形成。

時至今日，這批舊藏珍貴的藝術、史料價值仍有待繼續發掘。這批藏品也促成了本館書畫裝裱室的設立。