楊玄感到洛陽後,連打幾仗都取得勝利,自以為天下百姓都響應他,一個早晚就可奪取天下,抓獲隋朝的內史舍人韋福嗣後,把機要事務交他辦理,從此征戰大事,不由李密一人主持。韋福嗣本來不是同夥,由於戰敗被俘,每當商議謀略,都持模稜兩可的態度,楊玄感後來要他起草佈告文書,韋福嗣堅決推辭。李密推測他的心意,就對楊玄感說:“韋福嗣本來不是同志,實質上抱著觀望態度,您剛舉義旗,卻讓奸細留在身邊,必然被他誤事,請您將他斬首來向人們道歉,人心才會安定。”楊玄感說:“哪會這樣?”李密知道說了無用,私下裡對關係親密的人說“:楊楚公喜愛造反卻不打算成功,怎麼辦?我們將會當俘虜了!”後來楊玄感準備向西進軍,韋福嗣終究逃回洛陽去了。