该馆位于登峰麓湖公园，建于清嘉庆十七年(1812年)，占地面积5500平方米，其中主馆建筑面积448平方米，水面面积3700平方米。
主馆坐落于麓湖路旁一高坡上，面向麓湖。高坡由大理石围脚，其中有5块均1平方米面积的花岗石，分别刻“白云仙馆邹鲁(印)”，字体雄浑古朴。
山门石柱上刻有一联“香火千年祖庭瞻仰 白云四面仙客栖迟”。经过天井，进入大殿。门匾木刻“博爱 孙文(印)”。门柱有一木联“从古白云多蒲涧 几番沧海又桑田”。殿柱也有一木联“白云初晴幽鸟相逐 流水今日明月前身”，题字落款为全国政协副主席赵朴初。
仙馆初为广州文人墨客雅集之地。后来，供奉八仙之-的吕洞宾，并有道士主持管理。建国后曾修葺开放。“文化大革命”期间，受到破坏。1984年初，广州市人民政府拨款重修。9月28日，重新开放，让人们参观。