南朝梁天監十二年（513），衡陽(yáng)市南區回雁峰山上建云禪寺，隋改名為雁峰寺。唐建壽佛殿，供無(wú)量壽佛像。明修有望岳亭、宮室寺、此君軒、望江樓等。清建大雄寶殿、大悲閣、摩云舍、望雁樓、指月寮等建筑。峰前有煙雨池，“雁峰煙雨”為古城衡陽(yáng)八景之一。
1944年，日軍侵入衡陽(yáng)，山上古林殿閣慘遭焚毀，僅存一座寺門(mén)和半間佛殿，寺門(mén)上“上達”二字相傳為清代一高僧所書(shū)。1985年，回雁峰被辟為公園，占地約0、19平方公里。峰前新開(kāi)辟的雁峰廣場(chǎng)中心建有大雁雕塑，高10米，為衡陽(yáng)市城徽。廣場(chǎng)正面是一座雕梁畫(huà)棟的仿古門(mén)廳，匾額"南岳第一峰"為趙樸初題寫(xiě)。峰上重修望岳臺、雁峰寺，復原觀(guān)天池、此君軒。
美食:
白天：
如果不想走得太遠的話(huà)，在公園大門(mén)左側有一家名為美心菜館的店子，這個(gè)店子的家常菜還不錯，價(jià)格也不是很貴；如果想吃到真正的衡陽(yáng)菜，也不嫌遠的話(huà),可以去環(huán)城南路或紅湘路（打的一般不超過(guò)8塊錢(qián)）上，有很多規模中等但是口味很不錯的餐館，如鄉巴佬、旺旺旺等，尤其是臘味菜更是一絕；這兩條路上還有許多衡東土菜館，是正宗的土菜哦！
晚上：
傍晚時(shí)分，衡陽(yáng)的夜宵攤就開(kāi)始營(yíng)業(yè)了；雁峰公園周?chē)砸瓜牡胤酵Χ嗟��？梢灾苯幼叩浇吶ィ?00m），很多夜宵攤，在衡陽(yáng)吃夜宵嗦螺和口味蝦千萬(wàn)要吃哦；可以如果不嫌遠，可以沿中山路走到進(jìn)步電影院，就在進(jìn)步電影院旁邊的小巷子里有許多美食，像臭豆腐啦、燒烤啦等等。啊，流口水了！
