南京西路325号于1933年建成，原为旧上海跑马场，是30年代英式风格的楼宇。改扩建工程完整地保留了其原有的新古典主义特色外观，并根据美术馆的功能要求进行了内部改造，在设计上继承了欧式建筑的传统语言，并强调了明快的现代气息，是一座典雅、大方的艺术殿堂。当观众步入端庄的大厅，仰望凝重的梁柱，再沿着宽敞的楼梯拾级而上，抚摸着三十年代的铜铸马头，浏览着艺术家的精美之作，定会领略到新旧上海的历史变迁，感受到引人入胜的文化魅力。
上海市第一批优秀历史建筑名单
19
跑马总会
上海美术馆
南京西路325号
1.体操房
1956年将原底层马槽房南部辟为体操房，面积1412平方米，北部建为竞赛馆，1983年将南、北两部全部建成体操房，主要用来训练学龄前儿童。1984年成立了体操训练中心，先后向市队输送了包括朱政、吴佳妮、史美琴、尤建莉在内的优秀少年选手15人。
2.乒乓球房
由三楼的789平方米和二楼的392平方米2个大厅组成。三楼原是跑马厅的舞厅和酒吧，后改建成乒乓球房，可放14只乒乓球桌。二楼原为拳击房，1958年国家体委撤销了拳击项目，遂将其改造成乒乓球房，可放8只乒乓球桌。乒乓球训练从1957年开始，培养了包括李富荣、郑敏之、李赫男等人在内的著名选手。上海市乒乓球协会设于此处。
3.武术房
邻近人民公园，原为跑马厅赛马售票房之一部分。1956年改建成武术房，面积193.74平方米。著名武术家佟忠义、王子平、傅钟文、褚桂亭等都在此活动。1984年前为上海市武术协会所在地。
4.击剑房
原为二楼赛马售票房之一部分，面积294.3平方米。1957年开办第一期击剑训练班，先后培养出苏联凤、陈静析、劳绍沛、杨文勇等著名击剑选手。是上海市击剑训练基地之一。
5.举重房
原为跑马厅大门南侧底楼，室内面积221平方米，室外场地近百平方米。1957年开始训练举重，先后培养出常冠群、陆振鹤、曲炳瑜、蒋华根等一批举重名将。是上海举重协会所在地。
6.棋室
初设于原跑马厅大门南侧底楼滚球房中，1958年迁至二楼，面积300平方米。中国象棋何顺安、屠景明、朱永康、胡荣华；国际象棋徐天利；围棋刘棣怀、王幼宸、吴淞笙、陈祖德都在此训练过。1984年后，因围棋班并入体育俱乐部，国际象棋和中国象棋并入棋社，体育宫棋类活动便告停止。
7.摔跤房
1956年改建时，在二楼设摔跤房，面积为193.74平方米，“文化大革命”中撤销。1978年重新启用。1984年摔跤项目并入上海体育运动技术学院后，此处不再开展摔跤活动。
8.溜冰（轮滑）场
位于看台东的两个溜冰场，50年代是250米跑道的田径场，中间有两片篮球场。1979年在上海汽轮机厂的帮助下，于北端修建了面积为1200平方米的溜冰场。1981年，投资30万元，将篮球场改造成符合国际比赛标准的有200米滑道椭圆形露天溜冰场，面积为5300平方米，可同时容纳1500人活动，1982年竣工。同年举办了全国第一届金雀杯速度轮滑邀请赛。1984年接待了美国、意大利、加拿大、香港、日本等国际花样轮滑明星的训练和表演。1987年举办了全国轮滑锦标赛，该场为市轮滑代表队的训练基地。
9.保龄球房
位于原跑马厅上下两层看台的中间，建于1985年，球房长85米，宽11米，向南、北各设有6条球道。中间有休息室、服务台、酒吧。全套设备由市体委投资18万美元，向美国AMF公司引进，土建装潢约100万元人民币，由体育宫投入。每年10月，在此举办国际邀请赛和国内的大型比赛。该场地为市保龄球运动员训练基地。1992年，市体委投资58万美金，更新全部球道，1993年第一届东亚运动会保龄球赛在此举行。
1993年后，根据上海市对人民广场地区发展的总体规划，市体育宫拆迁，改建大剧院。
最早是道光三十年（1850年），上海跑马总会于今南京东路以北，天津路以南，河南路一带，圈地81．744亩为跑马场，中间设有草地滚球场，所以也有人称它为抛球场，它四周围以木栅，种有花草，人们也称它为老公园。
咸丰四年（1854年），由于小刀会起义，华人涌入租界，租界地价暴涨，跑马总会高价出让了老公园，在浙江路两侧，西藏中路之东，湖北路北海路之北，芝罘路以南的大片土地中取得了171．476亩土地的使用权。建成第二个赛马场，它的一圈跑道使用不完171亩，其中有34．5亩土地空着，此外，中间尚有大片农田。咸丰十年，所余的34．5亩，由4名外侨合股建成运动场，称公共体育场，中间辟有板球场、抛球场等。一年后，由于太平军攻城，又有大批华人进入租界，跑马总会又将这一片上地卖掉，再次低价强圈今人民公园及人民广场的500余亩土地建造跑马厅。
[30年代西侨公共体育场6月至10月场地安排]
跑马厅的草地跑道，长1．25英里（约2116米），宽60英尺（约17米），在跑道中间尚有430亩土地，于同治二年（1863年）十一月，由原新公园的公共体育场的董事组成的上海运动事业基金董事会买下，建成为综合性的体育场，称西侨公共体育场。其间建有高尔夫球场1片，东南角建有棒球场，其它有足球场、板球场、草地滚球场、网球场等，光绪十八年（1892年）又建成了上海第一所游泳池。
跑马厅及公共体育场的土地，是以永租的名义取得的，他们所取得的只是使用权，土地的主权仍应为原业主，但并无任何业主取得过租金，而是由当时的清政府后来的民国政府每年向跑马厅收取租金。直到民国26年（1937年）抗日战争爆发才停收。抗战胜利后，市政府将年租金改为地价税。
跑马厅和西侨公共体育场共处于一个场地，但管理机构是两家，跑马总会管理外圈跑道及看台设施，运动事业基金会管理中间体育场及内圈跑道。双方使用场地订有契约：跑马总会允许基金会从东大门及龙飞门进出马道，如在赛马季节，允许基金会成员参加赛马。而运动事业基金会则不能在场内种植高大树木和建造高大房屋，以免妨碍观众视线，在赛马季节允许骑师用公共体育场场地进行跳浜比赛。跑马厅与公共体育场活动也相互错开，逢赛马日，公共体育场关闭，非赛马日，公共体育场全天开放。
跑马厅和公共体育场曾订有规定，最早都不准华人参加活动，连买入场券进去看赛马也不准。宣统元年（1909年）以后，允许华人买票入场看赛马和博彩，但看台和西人分开。民国23年跑马厅大看台建成后，南端的露天看台供华人使用，北部看台供西人用。公共体育场直到解放，一直不准华人入内。
民国30年底，跑马厅被日军占领，日伪设立上海体育会管理跑马厅与公共体育场，继续经营赛马。
抗日战争胜利后，跑马总会重新接管跑马厅。民国35年计划重开赛马，未获市政府批准，公共体育场活动人数也远不如前，该场一直租给美国海军陆战队作为营地，直到解放。
1951年8月27日，上海市军事管制委员会根据土地国有的规定，“将跑马厅及公共体育场的土地全部收归国有，作公共地”，南部改建为人民广场，北部建为人民公园。1954年5月31日，跑马厅全部建筑物由政府接收，看台改建为图书馆和体育宫。