呢？魏元忠初為宰相時，我是他手下的郎官，前往祝賀，魏元忠向我們說：‘無功受寵，不勝慚愧’。我當時的確說過：“明公位當伊尹、周公之任，怎麼當了三品官就覺慚愧呢？伊尹、周公都是作臣子最忠心的人，人人都仰慕他們啊”然後又轉向武則天說：“當今陛下任用宰相，不讓宰相學習伊尹、周公，還要他們學習誰呢？臣哪能不知道，今日附於張昌宗便可馬上升官，若附魏元忠則立致滅族但是臣害怕魏元忠的冤魂，不敢誣陷他啊”＇《資治通鑑》，卷207，長安三年九月。＇（末段未引原文，直譯。）
武則天生怕案子裡仍有陰謀存在，對眾人說：“張說反覆無常，稱魏元忠為伊、周，在張易之面前又說他謀反；先說魏元忠反，又說張易之誣陷。應該把張說押起來一起審訊。”第二天，武則天再問張說，張說仍堅持張易之等誣告魏元忠。武則天命宰相們與河內王武懿宗共同審問張說。但是，怎麼問張說還是堅持說魏元忠不反，是張易之等誣陷。
其他幾位宰相不敢替魏元忠說話，正諫大夫、同平章事朱敬則抗疏為魏元忠鳴冤，說：“元忠素稱忠正，張說所坐無名，若今抵罪，失天下望”當時有冀州名儒蘇安恆，曾數度投書武則天言事，武則天很重視他，此時聞魏元忠遭陷害，也上疏說：“陛下**之初，人以為納諫之王；暮年以來，人以為受侫之主。自元忠下獄，里巷恟恟。皆以為陛下委任奸宄，斥逐賢良，忠烈之士，皆撫髀於私室而箝口於公朝，畏忤易之等意，徒取死而無益。方今賦役繁重，百姓凋蔽，重以讒惹專恣，刑賞失中，竊恐人心不安，別生他變，爭鋒於朱雀門內，問鼎於大明殿前，陛下將何以謝之，何以御之？”＇《資治通鑑》，卷207，長安三年九月。全文載：《全唐文》卷第3031—3032頁。＇張易之等見奏，都勸武則天殺死蘇安恆。武則天雖未聽，但蘇安恆奏摺實際未起好的作用，他把問題說的太嚴重，尤其從武則天的統治根本入題，認為她聽信、依靠奸人，陷害忠良，已經弄得人們不敢說話。而且賦役繁重，百姓飢寒交迫，刑賞失當，人心不寧，人們就要造反打到宮殿裡去了……。這是根本否定武則天的統治，武則天已變成了暴君了。這那還是隻想解救個魏元忠呢？如此一說，魏元忠真就成了一個造反的領袖了。
正是從這個奏摺裡，她才真警覺起來，原來魏元忠等人並不是只想除掉張氏兄弟，他的背後一幫人是對武周朝不滿，對她統治不滿。魏元忠下獄，這麼多人激動，要同他一起赴死，又迫得蘇安恆說出這麼一頓揭露她的話。所以，她決定絕不可能再把魏元忠留在朝內，就立即下詔把他貶到中國的南邊陲高要縣做小縣尉。同時也把張說和高戩流放到嶺南。
魏元忠向武則天辭行，向她說：“臣老矣，今向嶺南，十死一生。陛下他日必有思臣之時。”
武則天讓他說說明白，當時張易之、張昌宗都在武則天身邊侍候著。魏元忠指著他們說：“此二小人，終究是禍亂之根”張易之等聽了，嚇得屁滾尿流，趕緊下殿叩頭，捶胸頓首，直叫冤枉。
魏元忠說罷叩首而去。女皇見魏元忠離去，從龍椅上站了起來，踉蹌了幾步，若有所失地說：“元忠真的走了嗎？”
殿中侍御史王晙還想上殿替魏元忠說理，宗攔住他說：“元忠幸得全身而退，你再多說，引起皇帝震怒，不知該有多狼狽呢”王晙說：“魏公以忠獲罪，我以義再奏，即使也被髮配流放也再所不辭”宋嘆曰：“我不能為魏公申理，深負朝廷啊”
魏元忠離京時，太子僕（掌管太子車與、乘騎、儀仗官員）崔貞慎等八人為他在效外餞行（因魏元忠兼太子左庶子）。張易之兄弟聽說此事，便化名“柴明”投信銅匭，密告魏元忠與崔貞等繼續謀反。武則天又令監察御史馬懷素調查。武則天進一步認為魏元忠身為朝中首輔大臣，又在太子東宮任重要職務，他們生離死別，急中生變，可能做出不軌之事，因此想查出個水落石出。馬懷素查案時，她同時派人監督、催促，以防保庇作弊。
馬懷素很快上奏說：“崔貞等人僅為餞行，並無反狀。”並提出讓柴明出來與崔貞等人對質，武則天聞奏說：“我並不知柴明何許人，你也不必讓他們對質，只要根據密狀報的案情審理就可以了。”馬懷素說，實情就是送行。武則天大怒，說：“你是想縱容他們造反嗎？”馬懷素說：“臣不敢魏元忠以宰相被謫，崔貞作為故舊相送，要誣陷他謀反，臣不敢這麼做。西漢時欒布上奏敕免彭越，漢高祖不認為欒布有罪。何況魏元忠的罪名實情和貶官的處理都不如彭越重，難道陛下還要殺死送他的人嗎？陛下