在古代，仙人橋的地方被稱為白龍澗，其底部深不可測。其中有六條白龍盤踞於此，作惡多端，興風作浪。每年，當地人都會給男孩女孩、牛羊送去祭品，這有點不小心。冬天有大風，夏天有大雨，災難不斷，到處都是人。當地人上山打柴。如果他們誤入白龍洞，它將成為六條白龍的食物。
正在金閣山修行的何仙姑看在眼裏，怒在心裏。不管她淺薄的做法，她決定為人民做傷害。何仙姑和六條白龍從地面戰鬥到空中，從山上戰鬥到山下，直到天黑。經過整整壹年7749天的戰鬥，六條龍戰敗逃入深水溪流。何仙姑從腰間抽出壹個桃籬，撈出六條白龍，放在白龍溪上供人們上山通行。
久而久之，六條白龍變成了六塊石頭漂浮定格在兩座懸崖之間。人們把它命名為仙人橋，以紀念何仙姑拯救人民的努力。