县城曾给海盗攻破过，就陷入没落，永嘉府府治曾一度被迫移至瓯海；去年三月永嘉城给奢飞虎率部攻入时，破坏程度就变得更加的严重。

之后浙南都督府的资源多给抽到东阳县，在淮东军驻落鹤山防寨的正面构筑防线。一直到浙南形势危急、秦子檀代表奢飞虎到永嘉督战之后，才抽出人手加强永嘉、上塘的防御。

秦子檀重回浙南后，永嘉及上塘城防的一些不足都得到有效的加强，但终究城池低矮，无法全面的包覆砖木，永