衡阳县城，位于湘江中游西岸，南岳衡山之南麓。衡阳湘江东岸，有粤汉铁路衡阳站，车站之东为飞机场。南城外有约数千公尺纵深起伏山地，再南为丘陵与水稻四混合地带，城厢之西，除部山地与南面山地相连接外，大部分密布鱼塘莲池之沼泽地区。再西为广阔水稻田区。河幅百公尺之蒸水，紧靠北门外而过，进入湘江（亦名草河）。北门外蒸水上，筑有行驶汽车之大桥。蒸水北岸为丘陵地区，蒸水与湘江交汇之三角高地，有一七层古老巨塔，塔名回雁，相传北来雁群，至此塔东西之线回翔，不再南飞，故名回雁塔。衡阳东北面城墙，用为防堵湘江及蒸水水患故尚保留外，余皆拆除。 　　湘桂铁路接轨粤汉铁路衡阳站，经湘江大铁桥，通往广西省会桂林，再延伸至柳州，黔桂铁路接轨于此，通往贵州省会贵阳。抗战末期，黔桂铁路至贵阳，尚有一段未完成，衡阳保卫战时，火车只能通至贵州金城江附近。湘桂铁路衡阳站，设于南门外约三华里张家山麓。因之衡阳有两个火车站，粤汉称之为东站，湘桂称之为西站。