赭山社区位于南阳街道西南面，三面围山靠近钱塘江边，东临永利村，西接坞里村，总面积1.8平方公里，南宋时期著名的“赭山十景”便位于此处。社区下设9个居民小组，总户数为409户，总人口为885人。辖区内有行政、企、事业单位4个，住宅小区5个，商住楼5幢，个体营业网点251家。

这里商贸繁华：翻阅赭山的历史，会发现赭山历来是一个经济繁荣的小集镇。赭山早就在南宋时已建设成为经济发达、对外开放的前沿阵地。如今的赭山集镇承担着赭山社区、永利村、远大村、红山村、坞里村等5个村及周边企业2万多人口的市场服务，车水马龙，热闹繁华。

这里环境优美：赭山山上的石质赭色(赤红色)而得名赭山，赭山社区夹在三座山之间，北面有狮子山，西南有美女山，南面有红山，西临钱塘江。这里依山傍水曾经是南宋皇家的狩猎场，如今在街道党工委、办事处的领导下，赭山社区围绕“用心服务、打造品质、共创和谐”的社区服务理念，贯彻“退二进三”方针，着力打造环境建设和集镇管理，随着空港新城建设的推进，赭山或将成为南阳观潮之外的又一个好去处。

赭山社区与远大村、横蓬村、赭东村、岩峰村、南翔村、雷山村、东风村、南兴村、坞里村、南阳社区、龙虎村、红山村、永利村、南丰村相邻。