相传某年，八仙去蓬莱路过白云山，忽被一片红光挡住去路。按下云头看时，原来满山桃花盛开，串串神灯，游来飘去，把整座山照得赤红如焰，灿烂如霞，比那蟠桃园还强之百倍。八仙在这神灯花海中流连忘返，赞不绝口。此后，逢仙便说，一传十，十传百，每逢清明三月三，各路神仙便纷纷至此聚会，观灯赏花。从此，这山便叫“会仙山”。

有一年，一个皇封的和尚来此主持寺院，舍粥施斋。一时，会仙山香火旺盛，但上香的年轻女子却常常失踪。一日，外地父女二人上山求乞，和尚道：“老施主，门外稍候斋饭，我与女施主进去拿些银两，权当路费。”谁知，女儿一去不回。寺门紧锁，老汉呼天号地，无人应答。至夜，老汉昏迷中，忽见眼前红光闪烁，一位执灯仙女立于面前。仙女向老汉问明原委，赐鲜桃一枚、桃灯一盏，教救其女。桃花仙女遂飘然而去。老汉顿觉耳边生风，睁眼看时，自己已在千里之外的京城皇宫门外。

却说皇宫中恰逢怪事，两天前皇太子正在宫中玩耍，见西南方一串红灯，顿时双目失明，口不能言。御医百般疗治无效。夜间，皇上皇后同得一梦，见宫门外一老汉，怀揣仙桃一枚，说太子吃了后可立即双目复明，开口讲话。晨起，忙命太监开宫门，果有一老汉站在门前。老汉入宫，献入仙桃，太子果然病愈。

皇上问老汉所欲，老汉说：“一不要官，二不要钱，要为女儿伸冤。”随即陈诉前情，皇上大怒，命大臣即赴会仙山拿和尚治罪。这和尚是皇后亲侄，皇后为其进言说:“不可轻信。”老汉取出桃灯一盏，皇上朝东南方一看，千里之外的会仙山近在咫尺，寺内白骨累累，和尚正欲作践老汉之女，皇上大怒，遂将神灯对准和尚一照，和尚一下僵立不动，变为一块石头，后人叫“和尚石”。石边寸草不生，俗呼为“和尚头”。