大约在南京沦陷消息传到台州后，台州也就动荡起来，潘映娄便跑去杭州请派兵来维持地方安宁，然后刚到杭州，潞王便投降了，潘映娄因此也就在杭州一起降清，之后被直接授了杭州同知一职。

潘映娄本身能力挺强，尤其是长的英俊帅气，还背景也不错，他爹潘汝祯，曾任浙江巡抚，而且还是第一个为魏忠贤立生祠的，所以潘家父子在士林中名声不太好。

尤其潘映娄跟同乡阮大铖关系好走的近，当年一起组织过