五老峰内历代建筑遗址有64处。主峰玉柱峰上原有七处建筑，“南天门、黑虎灵官殿、祖师庙、白衣大士殿、千子堂、救苦菩萨殿、舍利塔”。五老祠是风景区的主体宫殿，座落在太乙坪峰上，内有五老殿、三清殿、玉皇殿。又称作灵峰观，观内四周还有其它建筑。　　过去，人们朝山进香，多以峰峪为进山主干道，所以茶房林立，山中茶房极多，仅峰峪口就有40座茶房。为各县乡财主贵族在农历七月古庙会时作施舍慈善之举免费接待本地朝山游客的临时客栈和饭店。有名的、规模较大的有椿树茶房、鞍桥岭茶房、抱榆树茶房、上柳树茶房、下柳树茶房、核桃树茶