文殊臺在玉屏樓前懸岩上。其臺為一巨石，中間平坦，左右凸起。臺前空曠，是觀賞南海風景的極佳處。傳說古時，蓬萊仙島的文殊菩薩，邀了天尊、地藏兩個菩薩，駕著五彩祥雲，來到黃山春遊。他們來到玉屏峰上，見這裡風光神奇美麗，各自心裡都盤算著要在這裡立個寺廟，享受萬家9火。在遊罷黃山返回蓬萊的路上，文殊躲在一旁，等天尊、地藏走遠了，就掉轉雲頭，飛奔黃山，搶先占了玉屏峰。天尊、地藏各自回府阿，為了搶占玉屏峰，天尊連家門也沒進，就駕起祥雲，趕回黃山。那地藏進了家門，匆匆收拾了一下行李，也駕起祥雲，往黃山趕。不料文殊搶了先，已經在這裡占山建寺，，大尊、地藏一齊責罵文殊不講交情，吵著也要在玉屏峰建廟。文殊說：“我坐在這玉屏峰前的懸崖上，你們若能把我拉得起來，我情願把這座仙山讓與二位。”隻見天尊和地藏各挽著文殊的一隻手臂往上拉，一連拉了兩次都拉不動，在拉第三次時，他倆花去九牛二虎之力，一下把文殊拉了起來。這時一位9客在一旁見了，高聲譏笑道：“想不到，你們菩薩也這樣你爭我奪呀！”三個菩薩聽了，不禁臉紅心跳。當文殊還在拼命把身子往下墜時，冷不防他倆突然松手而逃，便重重地跌坐在高高的懸崖上，連岩石也陷下去一個印兒，就像座椅一樣。玉屏峰前的這塊懸崖，就是如今的“文殊臺”，那文殊跌坐下去的岩石，就是“文殊座”。臺左側石上刻有“文殊臺”三字，為張善孫所題。