在很久以前，五指山脚下居住着许多黎苗族人。有一段时期，很多族人得了各种各样的怪病，难以医治。一天晚上，有一黎族家庭五兄弟中的老五睡梦之中，梦见一位须发全白的仙翁走到他的床前对他说：“老五，你们族人得的各种怪病很难医治，除非你们五兄弟能登上五指山的五个山峰分别采来青、黄、黑、紫、褐五种灵芝混合煮汤给他们喝，怪病就会自然消除，并能健康长寿，说完仙翁就消失了。老五从梦中惊醒就把梦告诉四位哥哥。第二天五兄弟分别攀上五指山顶峰，经过千辛万苦采摘到了五种灵芝，带回来煮汤给族人们喝，他们的怪病就逐渐消除，五兄弟的行为感动了南海观音，南海观音就地封他们为掌管五指山的山神，后来黎族同胞就朝拜五指山的山神为五仙哥——这就是五哥的来历。