白鹿寺始建于東晉，一名觀音寺，又名壽光寺，距今已有1600多年，是目前有資料可考的各地白鹿寺院中歷史最悠久的名剎古寺。白鹿寺距武陵城區20公里，山峰俊秀，林木繁茂，遮天蔽日。
古時白鹿寺坐落于梁山南麓東側，環境清凈，然而，經歷歲月洗禮和戰火烽煙，遺址僅存殘垣斷壁。抗日時期，曾一度作為常德女子中學校舍，“文革”期間，寺毀游客絕跡。2008年，省宗教局下發同意重建白鹿寺的批復，市委、市政府將白鹿寺的新址規劃在梁山山脈的花山，行政劃撥土地20畝，民間籌集建設資金4000萬元，于同年底全面啟動建設，歷時4年多，目前寺院等主體工程全部竣工
