1935年10月10日：衡陽火車站建成

衡陽火車站座落在衡陽市珠暉區(qū)，初建時的衡陽站主體站房為1棟3層樓房，面積2700平方米。有南北兩場：南場鋪14股道，有旅客站臺；北場有6股短線，供修車、存車用，并有機務(wù)段管線、粵漢碼頭裝卸線等，當(dāng)時是粵漢線上的區(qū)段兼編組站，湘桂鐵路建成后，成為通往兩廣、云貴和海外必經(jīng)之站。

鑒于衡陽位于粵漢、湘桂兩條干線銜接處，客運、貨運中轉(zhuǎn)量大，1950年衡陽站被列為全路主要編組站之一進行擴建，1952年建成全國第一個電氣集中站。1964年修建武衡雙線時，對衡陽站進行一次大的擴建。1989年新建衡陽北站編組站。

1990—1995年，按鐵道部批準(zhǔn)的設(shè)計，對衡陽站全面進行技術(shù)改造，南場專辦客運，主要有客車到發(fā)線5股，貨車通過線（正線）4條，客車整備、存車線10股，辦理客運房屋總面積10478平方米，新建候車大樓。站坪向南擴寬，面積7800平方米。候車廳入口處，設(shè)“三品”檢測儀，樓上裝電視監(jiān)視系統(tǒng)1套，設(shè)16個探頭，隨時在螢屏上，可觀察旅客候車動態(tài)，服務(wù)設(shè)施更為現(xiàn)代化。1995年5月30日，衡陽火車站由一等站升為特等站。

2005年5月19日，由于鐵路運輸生產(chǎn)力布局調(diào)整，衡陽北站、衡陽西站被撤并，統(tǒng)一屬衡陽站管理。其中衡陽站是集客貨運業(yè)務(wù)于一體的綜合性特等站，衡北站是特等編組站，衡西站是二等貨運中間站。合并后的衡陽站現(xiàn)有到發(fā)線49股道，編組線22股道。主要行車設(shè)備衡陽站、耒河站、衡西站區(qū)采用的是6502電氣集中聯(lián)鎖，衡北站區(qū)采用微機聯(lián)鎖和TW—2自動化駝峰設(shè)備。

1994年4月15日：首開特快旅客列車

1994年4月15日，衡陽列車段首開衡陽—廣州83/84次、85/86次特別旅客快車，結(jié)束衡陽無特快列車始發(fā)的歷史。

民國25年（1936），粵漢鐵路全線通車，武昌—廣州每周二、五開行旅客直達特快一對，按區(qū)段每日開行客車及混合列車，衡陽境內(nèi)鐵路始有客運業(yè)務(wù)。民國27年，武漢、廣州相繼陷敵，粵漢線只有株州—韶關(guān)一段通車。9月，湘桂線衡桂段建成，衡陽—桂林每日開行旅客列車及混合列車。抗日戰(zhàn)爭時期，衡陽每日向南、北、西開出客車、混合列車、軍用列車，成為中國的重要交通樞紐。

1949年10月衡陽解放，境內(nèi)最早通車的區(qū)段為衡陽—觀音橋，每日開行客車一列，早去晚歸。20世紀(jì)50年代初，由衡陽始發(fā)或經(jīng)過的旅客列車有：上海—廣州、武昌—廣州旅客快車，武昌—衡陽、衡陽—廣州、武昌—柳州、衡陽—柳州普客。武漢長江大橋建成后，途經(jīng)衡陽的上行列車可直達北京，經(jīng)過衡陽由衡始發(fā)的列車共計10對，其中始發(fā)3對：衡陽—南寧、衡陽—湛江直客、衡陽—郴州（三都）普客。1966年“文化大革命”開始，鐵路系統(tǒng)受到?jīng)_擊，各地學(xué)校師生開展全國性“大串連”，使整個客運受到嚴(yán)重干擾和破壞。

改革開放以來，特別是進入90年代，城鄉(xiāng)往來頻繁，經(jīng)商、外出打工、旅游人數(shù)增多，旅客逐年增多，鐵路部門陸續(xù)增加旅客列車，擴大編組，以緩解列車嚴(yán)重超員的局面。途經(jīng)衡陽及從衡陽站始發(fā)的客車由1989年的29對增至34對及44.5對，空調(diào)車全程對號的快車由4對增至8對。1994年4月15日，由衡陽列車段擔(dān)當(dāng)值乘的83/84次特快旅客列車首趟由廣州開往衡陽。83/84次列車運行于衡陽至廣州間，全程521公里，當(dāng)時的運行時間8小時24分，中間套跑85/86次于長沙至廣州間。這趟列車的開行，使衡陽這個交通要塞沒有始發(fā)特快列車的歷史成為過去，為加快湘南的開發(fā)和發(fā)展、緩解旅客乘車難提供了方便、快捷的交通條件。