宋绍兴二年(公元1132年)于山麓建有“塔山寺”，因山有石似塔而得名。后历经沧桑几度兴废，1986年由海内外乡贤竭诚襄助重建。
现该古寺依山临水，占地4000平方米，山门雄伟，寺宇堂皇，丹墙护院，琉瓦盖屋，寺前水库，群峰环抱，天水一色，景致雅观。此外，南峙山还有陆秀夫行迹、朱良宝起义营盘等多处遗址。
