香山寺位于十三朝古都洛阳城南13公里处的香山西坳，与龙门石窟东山窟区和白园并肩邻立，始建于北魏熙平元年（公元516年）。天授元年（公元690年），武则天在洛阳称帝，敕名香山寺。

唐大和六年（公元832年），白居易捐资六七十万贯，重修香山寺，并撰《修香山寺记》。乾隆皇帝曾巡幸香山寺，称颂“龙门凡十寺”，位于香山寺的乾隆御碑亭已有两百多年历史。清末民国初年，蒋介石和宋美龄多次在此避暑，香山寺内东南侧的小楼，被称为“蒋宋别墅”。解放后，香山寺又进行了多次修葺，2002年在原址上新建了钟楼、鼓楼、大雄宝殿，整修了天王殿、罗汉殿、步游道等。