回雁峰為南岳七十二峰之首。古人一直認為，北來的大雁南飛至此處便不再南飛了，只等來年春天再飛回北方，故名回雁峰。杜甫曾寫過“萬里衡陽雁，今年又北歸”。