香山海拔575米。

曾称杏花山：据史料记载，明朝香山曾有杏树十万株，开花时节，十里飘香，故明代戏剧家王衡称：“杏树可十万株，此香山之第一胜处也。”明代《帝京景物略》称：“或曰香山，杏花香，香山也……而杏花天，十里一红白，游人鼻无他薄，经蕊红飞白之旬。”可见古代的香山并非以红叶而知名，而是以杏花为主要景色。每到春天，从远处望去，漫山遍野杏花绽放，香气袭人，俗称“杏花山”。明代诗人谢榛到香山观赏杏花后，以“红云看不彻，漠漠杏林花”的诗句予以赞美。