后，祁阳共设6区。

第一区，驻观音滩，辖三吾镇、保浯乡、观桥乡；第二区驻归阳，辖归阳乡、靖炎乡、四靖乡；第三区驻白水，辖福泉乡、民治乡、大忠乡、潘家乡；第四区驻洪桥，辖至昌乡、金兰乡、振中乡；第五区驻龙家亭子，辖四治乡、景卿乡、民有乡；第六区驻文明铺，辖保麓乡、同文乡、文明乡。1952年，改属湘南行政公署（衡阳、零陵、郴州三个区合并为湘南行政公署），4月，将原祁阳县的东北部地区划出，另置祁东县。1954年，将宁远县和常宁县的部分地区划入祁阳，置金洞区（今金洞林场），7月，撤湘南行政公署，祁阳改属衡阳地区行政专员公署。1983年又改属零陵地区行政公署（永州市）。1996年隶永州市至今。祁阳从三国东吴置县至今已有1700多年历史。隶属多有变动，且境域历代变异很大，但祁阳县名一以贯之，且均为“郡之首邑”、“一等县”、“特等县”。魏晋南北朝时期，祁阳曾是三度为“侯”一度为“伯”的封地。祁阳境域，历代有所变异。三国时，祁阳境域限于祁山以东之清江流域和湘江以南的部分地区，还包括今衡南县部分地区。唐武德四年，永昌县并入祁阳县，遂拥有祁水流域和白水的中下游地区，面积广大，直至民国未变。1952年，将原祁阳县的东北部区、乡划出，另置祁东县。1954年，将宁远县和常宁县的部分地区划入祁阳县，置金洞区。为解决内下水库淹没区移民安置问题，湖南省人民政府于1993年11月批准，将宁远县荒塘瑶族乡的瓦窑村、新屋场村划归祁阳县管辖。祁阳的境域经过历史上归并、分割和再归并之后，迄今面积为2538平方公里。