唯獨竇建德很好地對待他們；因此隋官中有些人就舉城投降他；竇建德聲勢日漸浩大；擁有精兵十餘萬。
內史侍郎虞世基因為煬帝厭惡聽到賊盜的情況；所以諸將及各地郡縣告敗求救的表奏；虞世基都把它們加以刪改處理；不據實上報；只說：“鼠竊狗盜之徒；郡縣官吏搜捕追逐；快要被徹底消滅了。希望陛下不要放在心上”煬帝很以為然；有時還用杖責打據實報告的使者；以為說的都是謊話。因此盜賊遍佈海內；攻陷郡縣；煬帝都不知道。
楊義臣擊敗並收降河北的賊人幾十萬；他把情況寫表上奏煬帝；煬帝看後感嘆道：“我原來沒聽說盜賊到如此地步；楊義臣降服的賊怎麼這樣多？”虞世基回答：“小賊雖然多；但不足為慮；楊義臣擊敗小賊；卻擁兵不少；將帥久在朝廷之外；這樣是最不適宜的。”煬帝說：“你說的是。”於是派人追回楊義臣；遣散他計程車兵；盜賊因此又重新強盛起來。
煬帝到了江都；凡江、淮各郡官員謁見的；煬帝專問進獻禮品的多少幅。禮多則越級升遷郡丞、縣守；禮少的則恣肆地黜免官職。江都郡丞王世充進獻銅鏡屏風；升為通守；歷陽郡丞趙元楷進獻珍奇美味；升為江都郡丞。因此郡縣官吏競相對百姓肆意盤剝；以充實進獻之物。百姓外受盜賊的搶掠；內受郡縣官吏課賊的逼迫；生計無著；加上饑饉無食；百姓開始採剝樹皮、樹葉充飢；有的人將稻草杆搗成碎末為食；有的煮土吃；各種能吃的東西都吃光了；就互相吃人。而官府倉庫中的糧食還是充裕如初；官吏們畏懼刑法；不敢取糧救濟饑民。王世充還秘密為煬帝挑選江淮民間的美女來進獻；因此更加得到煬帝的寵信。
河間郡賊帥格謙擁有部眾十餘萬人；佔據豆子殷；自稱燕王。煬帝命王