包括東晉時代從西域罽賓國來的

▲作者為大眾講說惠能大師的故事（左方大樹為訶子樹，右方高塔為瘞髮塔）。

三藏法師曇摩耶舍，劉宋文帝元嘉年間（四二四-四五三年）從印度來的求那跋陀羅，以及從印度來的智藥三藏。此後曾經駐錫該寺以及弘法、傳戒、譯經、灌頂、傳法的歷代顯密高僧有：菩提達摩、六祖惠能、真諦三藏、般刺三藏、不空三藏、鑒真和尚、溈仰宗的仰山慧寂禪師、明末的憨山德清禪師，以及天然和尚。所以它是南方第一古剎，也是最大的佛教重鎮和漢傳佛教的發祥地之一。

據寺志記載，該寺原有十一殿、六堂、三樓，但因時間的銷蝕、文革的破壞，舊貌已不復見。不過，現在寺內還可以看到兩棵古樹，其中一棵是在六祖殿前的菩提樹，據說那是梁武帝天監元年（五〇二年），由西印度的智藥三藏帶來種植的，迄今已有一千五百年了，在文革期間曾經枯死，現在則非常的茂盛；