章氏心中不滿又不便直說傷了兩家感情，就想法子讓吳祖耀裝作因韓蕪瑩意外去世嚇著了暫不能成婚，以此來推脫這樁婚事，這一拖就拖到了今年。
兩年前吳明耀也到了議親的年紀，小劉氏給他挑了自己的堂兄從三品寶院舍人劉琛智的嫡女劉婉香，說好了今年結婚。小劉氏在生吳明耀之前生了一個女兒和一個哥兒，以往常常會接幾個孃家或者親近親戚家的小姑娘小哥兒到吳府暫住，劉婉香也在其中，所以吳明耀和她也算是青梅竹馬。
劉婉香長的美若天仙，性格又溫婉柔順，吳明耀一直挺中意她，卻不知道劉婉香暗地裡早就被吳
祖耀給勾搭住了。也是吳祖耀故意算計吳明耀，在吳明耀娶劉婉香一個月前，他竟然讓劉婉香懷上了他的孩子，準備在吳明耀和劉婉香婚禮那天把這事情說出來狠狠羞辱吳明耀，以此毀了他繼承吳家的可能。
這事情吳老爺、小劉氏以及吳明耀三人一概不知，甚至劉府上也一個不知道，但是吳章氏和她身邊的丫環侍郎們卻是知道的。劉姨娘原本就是吳章氏身邊的大丫環，是吳章氏故意放到吳明耀身邊做耳目的，可劉姨娘真心喜歡吳明耀，她從還在吳章氏身邊做丫頭的一個好姐妹那裡聽到了這件事，就悄悄告訴了吳明耀，打破了吳祖耀和吳章氏的計謀。
當時吳明耀知道後簡直氣瘋了，他本來一心只喜歡吃喝玩樂，並無心繼承吳家產業，平日裡也確認自己把這意思表現的足夠清楚明白了，誰知道吳祖耀還是要算計他，並且是用這樣下作的手段。
吳明耀知道劉琛智是個性格剛直好面子的人，對後宅管的向來嚴格，劉婉香的事情他必定不知情，就直接跑去把劉婉香和吳祖耀勾搭在一起懷孕的事情告訴了劉琛智。劉琛智一輩子清高，聽後氣的差點暈了過去，緩過來後就讓人在劉婉香的飯菜裡放了打胎藥，想要把劉婉香肚子裡的孩子給打掉。誰知道劉婉香自小身體就弱，那打胎藥吃下去後不止肚子裡的孩子給打掉了，連命也給打沒了。
這下可好了，劉琛智就一個女兒，這麼死了哪裡會罷休，直接就找到了吳府門上。吳老爺被氣的一病不起，吳章氏卻精神抖擻，聽說自己的曾孫沒了，站出來就把所有的責任推到了吳明耀的身上，直說吳明耀既然知道劉婉香懷的是自己親哥哥的孩子，就應該退了婚讓吳祖耀把劉婉香娶進門，這樣既不會讓兩家為難還是皆大歡喜的事情，現在卻害的吳家裡子面子全丟了個乾淨，成了整個大都的笑話，吳明耀簡直罪不可恕。
其實這事那時除了吳劉兩家以外其他人一概不知道，吳章氏這麼說不過是怕時間長了事情傳出去壞了吳祖耀的名聲，導致吳祖耀繼承不了吳家，所以她乾脆一不做二不休趁此機會給吳明耀扣個大罪名要求吳老爺分家罷了。
吳明耀本就無心繼承吳家，這下更是覺得膩味，就順著吳章氏和吳祖耀的心意求吳老爺分了家。吳老爺為了這事也是厭棄了吳明耀，又有吳祖耀從中作梗，就把離著大都十萬八千里的齊南郡的產業分給了吳明耀，其中大湖鎮有一座酒樓、兩座莊子還有幾座山的土地，這也是吳明耀最後定居這裡的原因。