丹霞山还是有名的佛教圣地，南宋政和间，居士法云登锦石岩，叹曰：“半生在梦里过了，今始觉清虚。”即造庵居住。相传,明末南阳李永茂、李充茂兄弟避难到此。其弟往广州海幢寺请来澹归和尚建别传寺。
一九八o年，本焕禅师在此主持，募捐巨款，建起了别传禅寺，一九八四年四月开光，中外佛徒慕名而至者络绎不绝，现居美国的纽约光明寺的寿治大师，亦不远万里前来参拜。
从别传寺可上到通天峡。峡两边壁如合掌，中夹径梯仅容一人，石壁上刻有“呼吸通天”四字，再上便是“丹梯铁索”。这是丹霞的最奇险处。一极险之丹岩，垂直而立，高约十丈，极狭且陡之石阶直通上苍，两旁装有铁索，犹如天梯一挂，游人上至霞关，不敢回首。壁上有“宜若登天”，确恰如其分。