灵岳寺位于斋堂镇灵岳寺村，唐贞观年间创建。传说先有灵岳寺后有斋堂城。辽时重建，此时称“白贴山院”，到了金代改称“灵岳寺”，即为现名。元至元三十年、至正年间、清康熙二十二年、雍正十一年四次重修。

　　灵岳寺的寺院建在白铁山主峰前的平台上，坐北朝南，中轴线上有山门、天王殿和释迦佛殿。寺南部山门两侧为钟鼓楼遗址。其中天王殿为悬山式建筑，建筑设计极为巧妙。殿内供奉着四天王、韦陀及接引佛塑像。释迦佛殿为单檐庑殿顶、调大脊式建筑，面积达100余平方米。檐下双昂五踩斗拱，拱眼壁为彩绘佛像。殿内原供奉的是一佛二菩萨像，系柳木雕刻，高近4米，可惜佛像在1954年被拆毁。寺内现存至元三十年(1293)《重修灵岳寺记》碑以及清康熙二十二年(1683)《重修灵岳禅林碑记》。

　　旧时该寺香火极盛，京西重镇斋堂就是当初灵岳寺施粥的地方，并因此而得名。门头沟区政府1981年公布灵岳寺为第一批文物保护单位，2003年被列为第七批市级文物保护单位。