湘南学联旧址陈列馆位于江东粤汉马路1号。1919年“五四”运动波及衡阳，在新民学会的影响下，省学联派人来衡阳联络各校学校，发起组织湖南学生联合会。后经衡阳教育界、工商界决议，将“浮桥公所”划归湘南学生联合会使用。当时将霸占公所居住的清提督申堂发赶出公所，挂上了“湘南学生联合会”的牌子。
参加湘南学联的成员有：湖南省立第三师范、湖南省立第三中学、湖南省立第三甲种工业学校及衡阳私立成章中学、道南中学、西湖中学等并辖湘南34县学校。经费来源于成员学校学生自治会，衡阳国货维护会也提供过一部分资金。学联内设总干事1人。干事若干人。分宣传、出版、游艺、文书等股，由各校选举总务长，另设会计、评议。湘南学联组织一年改选一次。该会的宗旨是：联合感情、交换知识、促进文化、改良社会。曾先后发表过《湘南学生联合会周刊》、《湘南学生》、《湘南学校》等刊物。
湘南学联成立后，积极组织和领导衡阳学生进行反帝反封建的斗争，抵制日货，宣传新思想反对旧思想，宣传十月革命的胜利。青年学生开始走上与工农相结合的道路，促进了湘南地区学生运动的发展。这里成了“五四”时期湘南学生运动的中心，同时为湘南党团组织的成立了思想和干部上的准备。
中国共产党成立初期，毛泽东多次亲临衡阳，住在湘南学联的厅堂里，传播马列主义，开展建党活动，指导湘南革命斗争。1923年深秋，毛泽东在长沙受反动军阀赵恒惕的通缉，途径衡阳赴广州。毛泽东在衡阳期间，又一次对湘南学联指导工作，并亲临三师作报告。在此期间，还有不少著名人士前来此地，开展革命活动。如刘少奇、李达、何叔衡、邓中夏、恽代英、李立三等。
在长期的革命斗争中，湘南学联涌现出一大批革命志士。如夏明翰、蒋先云、黄静源、曾中生、陈为人、伍云甫、张际春、何宝珍、关仲廉、毛泽建、江华、黄克诚、唐天际等。
湘南学联办公地点，原为专门管理浮桥的一个社会机构，故名“浮桥公所”，始建于清绪二十八年夏（公元1902年）。房屋坐东朝西，面临湘江。沿江南望，即可看到秀丽的回雁峰和岳屏山；沿江北望，也可看到端庄的石鼓和来雁塔。门前蜿蜒的石板小路直通南学津梁至湖南省立第三中学和第三师范学校。“浮桥公所”系汉白玉题刻，楷体，为前清进士、候补道曾熙所书，门右挂一白底黑字牌子，上书“湘南学生联合会”。旧址原四方形印字青砖墙，小青瓦覆盖，有一个天井，共十余间房屋，占地面积为583.64平方米，东南北三方都由低矮民房包抄。
旧址内为二进五开间，一进右开间为湘南学联总干事室。历届总干事都曾在此办公和住宿，著名烈士夏明翰在任学联总干事时曾在这里住宿和办公。二进左开间三房为毛泽东来衡阳时住过的房子，湘南学联驻会代表的屋子，湘南学联书报资料室。右开间二房为湘南学联办公室和湘南学联驻会代表的住房。二进后面是湘南学联的厅堂，后天井两侧为杂屋。
1927年马日事变后，湘南学联组织遭到了严重的破坏。此后，这栋房子曾作多方使用，先后设过红十字会、办过学校、作过仓库。日寇来衡时，旧址几乎摧毁殆尽。此后，一直作民房使用。
鉴于湘南学联在历史和现实中的意义，为了永远的纪念，1967年，政府开始拨款对房屋进行全面修善，以复原旧址，并增设了陈列馆对外开放。馆名系郭沫若手书“毛泽东同志革命纪念地湘南学生联合会旧址陈列馆”。1972年定为“湖南省重点文物保护单位”。1983年改为湘南学联纪念馆。建馆以来，共举办展览100余次，年接待观众5万人以上，成为革命教育的重要场所。江华、肖克、王首道等中央领导曾来馆参观、指导。
历经风雨，几度沧桑。纪念馆旧址日益破旧，陈列室狭窄漏雨。为了保护好历史文化遗产，大力发扬学联的革命精神，衡阳市委市政府把学联的改造建设纳入湘江东岸风光带总体规划。2003年9月，占地80余亩，投资过千万元的学联纪念园着手建设，由珠晖区负责4万平方米建筑物的拆迁，市建设局负责建设，2004年7月全部完工。该园规划为纪念园区、游园区两部分，其中纪念园区以修葺一新的湘南学联纪念馆为主体，突出革命传统教育主题。游园区的人工小河蜿蜒流淌，河面小桥精美别致，绿地花坛与凉亭相映成趣，园内所有景点全部保持古色古香格调，与学联纪念馆融为一体，浑然天成。整个园区既有传统韵味，又有现代气息；既可参观学习，又可休闲怡情。湘南学联成为爱国主义教育基地和旅游景点。
