姿色的，就留在禪房，縱情取樂。許多人的妻女被淫，因畏他權勢，只有忍氣吞聲。洛陽女兒，不知被他糟踏了多少。
太平公主看了，對母后說：“怪不得人們罵和尚是‘一字僧，二字和尚，三字好淫徒，四字色中餓鬼’，這禿賊就是這種貨。”
武則天聽了說：“對他，我早就有疑惑。以前，我每次召他，一召就來；現在召他，推三阻四，十次也來不了二三次。我想他一定在外面有什麼不軌之事，果不其然。現在他住在白馬寺，越發約束不住了。”
這時，太平公主又翻出一張。這是侍御史周矩寫的，說薛懷義在白馬寺擅自招募了一千多無賴之徒，剃了頭髮，偽裝僧人，整日弄刀耍棍，練功習武，恐有圖謀不軌，請皇上下旨追究。
看罷，太平公主說：“母后陛下，這周矩寫的奏摺，您看了沒有？”
“看過，這禿賊想找死了，竟幹起招兵買馬的勾當了。”
太平公主知道母皇最恨的是造反，便乘機慫恿說：“我看這禿賊也該活夠了。”
“我也有這個打算。”
太平公主明白母親的心意，究竟與他舊情難斷，一時間不忍心下手。再者，母皇封他為鄂國公，還有什麼輔國大將軍之類的，都是至尊至高的官位，一下子把他問罪、拉下來，豈不說明自己用人不當？
這太平公主還沒想出個頭緒，只聽母皇說道：“我打算任命他為行軍大總管，去遠征突厥。”
“誰？”太平公主以為聽錯了，問道：“母皇是說派薛懷義？”
“是的，是他。”
“母皇，我不明白，他有了兵權，不更麻煩嗎？”
“邊境來報，突厥新可汗默啜率兵犯境。我派薛懷義為行軍大總管，帶兵北征。這樣，他可以少在洛陽惹禍，他手下那些僧徒也有用武之地。要是打勝了，是朕知人善任；若是他戰死疆場，也算除了後患；即使不死，打了敗仗回來，我也有理由對他治罪。”
太平公主聽了這番話，連說母皇英明。她內心裡也確實佩服母親的計謀，自嘆不如。
這薛懷義領了行軍大總管之職，不知是計，只當是皇上陛下對自己的恩寵，便威風凜凜地帶上二十萬大軍向突厥殺去。
新繼位的突厥可汗默吸，有勇有謀，一把七十斤重的大刀，使得風車斗轉，曾多次侵犯唐朝邊關，都被羽林將軍程務挺打敗，再不敢輕易犯邊。後聽說程務挺被殺，默啜大喜，擺宴慶賀。接著，興兵深入唐境，連陷十餘城，如入無人之境。正得意時，忽聽探馬來報，說唐朝女皇武則天派了個胖大和尚為統帥前來征討，又聽說那胖大和尚是個法力無邊的有道高僧，嚇得默啜急令撤軍。
薛懷義不戰而勝，趾高氣揚地班師回朝。從此氣焰更加囂張，武則天一時間也奈何他不得。
薛懷義是個瘋野慣了的人，回朝以後，卸去將軍盔甲，仍舊穿上袈裟當他的白馬寺主，一心一意借佛行樂。回想當年修建明堂博得武則天喜歡，賜號為永珍神宮，自己也受重賞，他看出她是個好大喜功的人，便建議在明堂旁邊建一座叫天堂的佛殿。天堂內塑一大佛像，碩大無比，一個小指頭上就可以站幾十個人。他又故弄玄虛，在明堂前挖一個五丈深的大坑，趁做無遮法會時，突然從坑中拉出一幅高二百尺的佛像來。他吹噓說這佛像是刺他膝蓋上的血畫成的。佛像在皇城掛出後，引動八方信徒去參拜觀看，人山人海，擁擠無比。薛懷義在佛像下舉行大法會，會後大施錢財，把一車車錢幣拋到空中，引得人們瘋狂地去搶，當天就踩死踩傷數百人之多。
同時，薛懷義又放縱他手下的僧徒四處滋事，強取豪奪，姦淫婦女，無所不為。
侍御史周矩面奏則天皇帝查辦。武則天也對薛懷義的作為十分氣憤，但想到與他的舊情，便軟了下來，只對周矩說：“你且退下，朕立即派人去查。”
沒想到周矩剛回到御史衙門，薛懷義就騎著馬趕來了。下馬後，脫掉衣衫，直奔御史臺公案上，袒胸露腹，長條條睡下，還對周矩說：“你不是要查辦我嗎？來吧！”
周矩被氣得半死，命令僚屬把他抓起來，先辦他個無禮之罪。但還未等到抓他的人近身，他一躍而起，翻身上馬，連抽幾鞭，飛快出了御史衙門，轉眼就消失在大街上了。
周矩無奈，只好又去報告皇上，武則天對他說：“這個和尚是個瘋子，不去理他。他手下那些和尚，你可以查辦。”
周矩得了聖旨，立即把白馬寺的千餘和尚逮來，一一審間，把他們大部分判了流放，送邊地服