世之中，非世家的地方小势力也重新膨胀，利用政府权威衰退甚至是退出的机会，在中原各地建造起了大大小小的坞堡。这些坞堡，可以说就是一个个微型的割据政权，在无形中也把晋朝在中原残存的势力割裂得七零八碎，再无法凝聚力量以对抗胡汉国也即前赵，以及其后的后赵政权如飓风般的侵攻之势。
固然祖逖北伐的时候，很多坞堡都向他伸出了橄榄枝，甚至于受其领导，出兵出粮为他卖命，但这与其说是坞堡主们心向故晋，还不如说是祖士稚个人魅力的号召，而与其说是他个人魅力所致，还不如说是因情因势，不得不为之举。因为当时无论刘氏还是石氏，都在忙着稳固黄河以北的土地，河南地区处于半真空状态，祖逖恰在此时强势进入，才使得那些坞堡主们不得不暂时性地俯首帖耳。
史书上记载，当祖逖杀到河南之后，“河上堡固先有任子在胡者，皆听两属，时遣游军伪抄之，明其未附”，彼等若真是有戎晋之别、思晋之念，又怎么会先任子质胡，继而长期维持两属的局面呢？祖逖不能及时吞并、消灭这些坞堡，遂使得自军有若散沙，既不耐苦战，在他这个魅力无穷的领导者去世后，势力也便瞬间崩塌了。
故此裴该有了后世的经验，绝不能蹈祖逖之覆辙。尤