在香山静宜园东宫大殿后山的一片树林中，有几棵粗而高大的老松树。树下，有一块很大的岩石，岩石未经人工雕刻，方方正正地摆在那里，人们都叫它“仙人台”。据说关于“仙人台”还有一段传说故事。
有一年，园中一个小太监，提着宫灯，从东宫门值更房去学古堂办事。他走到勤政殿后山时，隐约看见那几棵树下，有几个黑影在晃动，走近一看，是几个老头儿坐在岩石上，又说又笑地喝酒。
他不禁一惊，是谁这么大胆，敢在御花园中无法无天地胡闹，再一看，几个老头儿不见了。
他吓得直冒冷汗，头也不回就向山下跑去，一口气儿跑到学古堂门前，上气不接下气地喘了半天，才进了宫门。办完了事，他不敢回值更房，就在这里住了一夜。
第二天清晨，他把昨夜的事禀报了公公。公公开始有点不信，在朝廷的花园里，怎么会有这样怪事，可转念一想，小太监应该不会骗他。
公公决定去看看究竟，交过二更，小太监点上宫灯，叫起老太监，两个人走出宫门。
小太监前面引路，直奔松树林去。两人隐蔽在一块山石后面，目不转睛地向前看，果然看见几个老头儿在喝酒。
他俩走近松树林，人却不见了。俩人回到值更房后，老太监也觉得这事有些奇怪。
过了几天，乾隆来园游玩，住在学古堂行宫。老太监把这件事奏明了乾隆，他听完后，也是半信半疑，便决定亲自去看看。
一切安排妥当，天交二更，一群太监提着宫灯，侍卫腰挎刀剑，前后护卫着乾隆出了行宫，不一会，就来到大松树下。
乾隆向树下一看，什么也看不见。又过了一会儿，还是什么也看不见。老太监有些慌了，忙请皇上先回宫休息。乾隆空跑一趟，有些生气，他觉得老太监是虚张声势。
第二天清晨，他传旨把老太监押到慎刑司，责打五十大板。老太监被打得皮开肉绽，鲜血直流，庆幸的是他保住了性命。
过了几个月，老太监的伤好了。他挨了打还不死心，在一天夜晚，他又偷偷地出了值更房，向大松树走去，不一会儿又看见几个老头在喝酒。再一看，人又不见了，他很纳闷，不知道事情为什么会这样。
后来有人说，那是八仙们在作怪，他们在四处游仙时，从这山上经过，见这里建了许多楼台琼阁，便轮流请客，恰巧，老太监带乾隆来看的那天晚上，没人请客，所以乾隆扑了个空，什么也没见到。
不久，八仙在静宜园聚会的事儿就在附近传开了，从那以后，人们就把这个石台叫成了“仙人台”。