孙惠娘的意思十分明白，戚继光不禁再次怦然心动。可是，正所谓最难消受美人恩，他即便不用考虑远在宁波军港眷村的夫人日后若是知悉此事，一定会做河东狮吼；却不能不考虑殴打了内阁首辅之孙会危及自己和诸位袍泽的前程，在这个节骨眼上，他怎敢色胆包天地留宿寒芳斋，给严嵩一党的言官御史留下自己“嫖娼宿妓，玷污大明官箴”的口实？因此，他只好没有听出孙惠娘话语之中的暗示，拱手一揖，说道：“我那几位同伴还在外厢等候，戚某告辞了！”
说完之后，戚继光把珠花放在孙惠娘身旁的案几之上，转身就离开了花亭。看他那狼狈不堪的样子，比刚才挨打逃走的严绍庭也好不了多少。