明嘉靖三十年（1552），县令刘畿嘹望台、窝铺，改木栏板水门为石砌铁叶水门。嘉靖三十八年，县令余世儒倡修城墙，于小东门、南门临江外加厚城墙5尺，名垛墙增高3尺，垛内周围筑矮墙。城墙四周扩大至1140丈，高1丈7尺，面阔8尺，址阔1丈3尺。城门5座：大东门名宾阳门（通永丰厢）、小东门名武靖门（通东山巡检司）、西门名永胜门（通沿江圩岸）、南门名镇海门（通飞云渡）、北门名瞻阙门（通北湖）。