新旧总督的交接工作进行了三天，这期间还包含了搬家。那天殷正茂走进总督行辕，伸头朝后院看了一眼，但见架起的两条竹篙上晾满了五颜六色的尿片，还听到两个婴儿哇哇啦啦一片哭声，再面对满院子绊手绊脚的乱七八糟箱笼行李，心里头顿觉秽气，半刻也不肯待下去，当时就决定另觅地方设立总督行辕。第二天，中军帐前参将黄火木在街东头觅了一处覃氏祠堂，前前后后大小房间也有二三十间，殷正茂遂下令把老行辕里该移交的文书物