后来黄斌卿又派人到定海、鄞城等地征粮招兵，惹出许多怨言，王之仁也恼了，派兵过去赶走了黄斌卿的人，双方于是便算结下梁子。

之后王之仁接受杭州招抚，把总兵印都交出去了，然后黄斌卿却拒绝了北使招降，双方的人马之后因为征粮招兵等事，起了好几次冲突。

黄斌卿也直接就骂王之仁降贼，还说要带兵来收复宁波。

王之仁劝朱以海不要去舟山，理由是黄斌卿虽然拒绝了北使招安，但这人其实