延庆观，原名重阳观，是为纪念全真教创始人王哲而兴建的。金末，重阳观已毁。元太宗五年（公元1233年），全真教徒受丘处机遗命，重修重阳观，历时三十年，规模宏伟，殿宇壮丽，元帝赐名“大朝元万寿宫”。元末又毁于兵火，仅存斋堂一座。明洪武元年（公元1373年），更名延庆观。
玉皇阁系观内原存斋堂，因屡遭水患，基部淤没地下三米多深，经挖掘整修，恢复了原貌。建筑共三层，通高18.25米，全用青砖、琉璃构件仿木建造，不施梁架，颇似一座蒙古包，内供明代真武铜像一尊。中层为八角实心，每面装饰歇山式山墙，均设鸱吻垂兽。上层为八角楼阁，外设琉璃栏杆，内供汉白玉雕玉皇大帝座像及左右侍臣，上盖脊饰犹存蒙古骑士形象，正顶装以火焰宝珠铜饰。整个建筑是蒙古包与楼阁的巧妙结合，造型奇特，色彩绚丽，国内罕见。
