五仙的传说源于中国民间。“五羊衔谷,萃于楚庭”,楚庭即广州,广州一带连年灾荒,田野荒芜,惊动了南海的五位仙人,五位仙人骑着五色羊降临到广州,将谷穗赐予勤劳的人们,祝福百姓安居乐业的故事。为了纪念他们,后人在他们降临的地方修了五仙观。