祁阳县第四中学创建汪差祥于1939年,前身是保麓乡小学,1956年由黎家坪附中始创为祁阳四中。祁阳四中1978年被定为省属重点中学,1980年调整省属重点中学时改为零陵地区重点中学(即永州市重点中学)。2003年,学校被定为湖庆悄南省现代教育技术实验学校,2005年12月通过省示范性高中检查组验收。2009年祁阳四中被确定为湖南省重点中学。是永州市首批重点中学、湖南省示范性高中(原名湖南省重点中学),2009年祁阳四中被确定为全省重点中学,是祁阳县继祁阳一中之困搏后第二所获得“湖南省重点高中”称号的高中,学校综合实力仅次于祁阳一中,祁阳县排名第二名。