席之後的王洪文，不再住釣魚臺九號樓二層的側樓。他轉“側”為“正”，遷入釣魚臺十六號樓，佔領了第二層樓。
姚文元把家屬接來北京，住在北京民族飯店附近的大院，但仍在釣魚臺辦公。
釣魚臺國賓館，成了這個“幫”的大本營。
毛澤東第一次對這個“幫”提出警告，是在一九七四年七月十七日的中共中央政治局會議上。毛澤東當著在京的那麼多中共中央政治局委員的面，指著王、張、江、姚道：“你們要注意呢，不要搞成四人小宗派呢。”
“四人小宗派”，這是毛澤東對王、張、江、姚的最初的“稱號”。
從此之後，毛澤東會見外國首腦，再也不要王洪文在側。
雖說如此，毛澤東對於王洪文，還期待著他的改正。期待著他“不要幾個人搞在一起”。從一九七四年六月一日周恩來病重入院起，毛澤東委託王洪文主持中央日常工作——這表明毛澤東對王洪文仍留有餘地。毛澤東對那個“四人小宗派”，也留有餘地。
一九七四年九月十七日，紐西蘭共產黨總書記維·喬·威爾科克斯訪華，毛澤東讓王洪文和張春橋出面去接待。
一九七四年國慶二十五週年即將來臨，毛澤東考慮到周恩來因病住院，指定由王洪文主持國慶招待會。周恩來在九月二十九日給王洪文寫了一信：昨晚作交我國慶節招待會擬見報的名單，並告我已經主席一一聽過，主席當即提出要加肖華、李力群、侯寶林三人，又問及商震是否列入。經政治局昨晚討論。你告我遵照主席精神，又加劉志堅一人。昨夜我匆匆看過名單，便想到齊燕銘。
今晚又將兩千多見報名單細細翻閱。在第十七類愛國人士方面，據統戰部提出起義將領四夫人韓權華（衛立煌夫人）、郭翼青（程潛夫人）、洪希厚（張治中夫人）、劉芸生（傅作義夫人）及張學銘（張學良之弟、張學思之兄，因呂案解案被禁多年，去年已無罪釋放）五人。我看，四夫人對國內外影響也不校至於張學銘，則因林彪利用東北軍一案大搞東北民主人士，現呂正操同志已平反，張學思已死（此案亦應弄清），故邀張學銘出席有此必要。
從周恩來致王洪文的信中看出，王洪文當時雖然已被毛澤東所疏遠，但仍保持第三號人物的地位。
翌日晚，中外來賓四千五百多人云集人民大會堂宴會廳。王洪文主持這一盛大國慶招待會，周恩來抱病出來致祝酒詞。
長沙告狀
就在國慶二十五週年招待會結束不久，王洪文栽了一個大跟斗……國慶節過去之後，毛澤東準備前往長沙過冬。臨行前，十月四日，毛澤東讓女秘書張玉鳳給主持中央日常工作的王洪文掛電話，告訴他重要的人事安排：毛澤東提議，由鄧小平擔任國務院第一副總理。
王洪文依然搞他的“四人小宗派”。當天晚上，他就把這訊息告訴了江青、張春橋、姚文元。在“四人小宗派”之中，這訊息如同炸雷一般！
按照“四人小宗派”的如意算盤：國務院第一副總理這把交椅，理所當然應該由張春橋來坐。毛澤東作出的新的人事安排，完全打亂了江青集團的奪權陰謀。
“這不是主席的意見，這是總理的主意！”江青氣得七竅生煙，把一肚子的怒火朝周恩來噴洩。
十月十七日，夜幕沉沉，四顆腦袋在釣魚臺十七號樓聚集。江青召來王洪文、張春橋、姚文元急商要事。因為丹麥首相哈特林和夫人已定於翌日抵京訪問，根據外交部的安排，將由鄧小平陪同，飛往長沙，拜晤毛澤東。
誠如王洪文後來在最高人民法院特別法庭上受到審訊時所供認的，那天夜裡，他們四個人“主要是密謀告鄧小平的狀。議論鄧小平對文化大革命不滿意，不支援新生事物，說鄧小平對四屆人大提名人選上可能有不同意見。還議論了姚文元提出的‘北京大有廬山會議的味道’。”
這“四人小宗派”作出緊急決定，翌日派王洪文直飛長沙。點子是江青出的，因為由她出面的話，要得毛澤東同意，才可去長沙，何況她只願坐火車，來回太慢；張春橋與鄧小平爭當國務院第一副總理，由他出面，顯然太露骨；由姚文元出面，也不合適，他的職務較低，一個政治局委員去向毛澤東建議國務院第一副總理該由誰來當，不妥當；唯一最恰當的人選是王洪文，“少壯派”，飛來飛去不在乎，況且他是黨的副主席。
王洪文曾供認：
“去長沙，實際上是一次陰謀活動·是揹著周恩來總理和政治局去的。江青提出要趕在毛澤東主席接見外賓之