。建德與百餘騎亡去，至饒陽，乘其無備，攻陷之，收兵，得三千餘人。義臣既殺士達，以為建德不足憂，引去。建德還平原，收士達散兵，收葬死者，為士達發喪，軍復大振，自稱將軍。先是，群盜得隋官及士族子弟，皆殺之，獨建德善遇之。由是隋官稍以城降之，聲勢日盛，勝兵至十餘萬人。
內史侍郎虞世基以帝惡聞賊盜，諸將及郡縣有告敗求救者，世基皆抑損表狀，不以實聞，但云：“鼠竊狗盜，郡縣捕逐，行當殄盡，願陛下勿以介懷。”帝良以為然，或杖其使者，以為妄言，由是盜賊遍海內，陷沒郡縣，帝皆弗之知也。楊義臣破降河北賊數十萬，列狀上聞，帝嘆曰：“我初不聞，賊頓如此，義臣降賊何多也！”世基對曰：“小竊雖多，未足為慮。義臣克之，擁兵不少，久在閫外，此最非宜。”帝曰：“卿言是也。”遽追義臣，放散其兵，賊由是復盛。
治書侍御史韋雲起劾奏：“世基及御史大夫裴蘊職典樞要，維持內外，四方告變，不為奏聞。賊數實多，裁減言少，陛下既聞賊少，發兵不多，眾寡懸殊，往皆不克，故使官軍失利，賊黨日滋。請付有司結正其罪。”大理卿鄭善果奏：“雲起詆訾名臣，所言不實，非毀朝