西梁山由大陀山和小陀山组成。山水相连，风景秀丽。临江悬崖之处，怪石层叠，历代诗人如李白、李赤、王安石、贺铸、郭祥正、杨万里、汪广洋、解缙、杜浩、王士正等曾至此浏览，题咏赋诗。此山又有“天门八景”之称：天门晚泊月辉映，似是蟾光碑水中的“天门夜月”；淋浴晨曦薄雾里，浮鱼晨曦色映金蚕的“博望朝霞”；矶头下面潮声大，却应回声唤渡人的“陈桥唤渡”；参差怪石悬佛像，俯首江流此回旋的“万庵观澜”；碧霞宫里雪飞晴，红装素裹看江景的“龙宫熏雪”；云阁飞来峭壁上，远近皆闻两三声的“云阁疏钟”；暮色秋雨细漾蒙，烟波浩淼白浪滚的“荻州幕雨”；西梁山下柳阴堤，悦耳黄莺枝上啼的“柳岸春莺”。
大陀山临江悬崖峭壁上，东晋永和三年（347），书法家王羲之摩崖刻石“振衣濯足”四字，“羲之署名，至今清晰可辨。明代天启年间和州州守池显京摩崖刻“天门”二字，笔法遒劲。明代万历三十六年（1608）及清朝道光年间所书“洪水至此”的石刻七处，已成为珍贵的水文研究史料。山前有怒吴阁、龙王宫、玉皇阁，山后有普光庵、石庵、补水亭，山尾有碧霞宫等建筑物，屡遭兵燹，均无存。唐诗人李白《天门山铭》云：“梁山博望，关楚滨。夹据洪流，实为吴津。两山错落，如鲸张鳞。惟海有若，惟川有神。牛渚怪物，目围车轮。光射岛屿，气凌星辰。卷沙扬涛，溺马杀人。国泰呈瑞，时讹返珍。开则九江纳锡，闭则五岳飞尘。天险之地，匪德无亲。”因其地势险要，历代是兵家必争之地。春秋时期的“吴楚长岸之战”就发生在这里。六朝建都金陵，在西梁山屯兵据守，称为梁山戍。唐武德年间，杜伏威副将辅公祏由梁山至博望用铁索连接锁断江道，并筑却月城延袤十余里。清咸丰三年（1853），太平军占据西梁山。后清末设游击署于此，驻梁山营，筑有炮台以资防守。