1954年3月底，江青從杭州回到北京，除了匿名信事件使她極其不快之外，又一件事使她非常尷尬、非常難受，給了她重重的一擊：那是她知道毛澤東喜歡游泳，擅自提議給毛澤東修建游泳池，遭到毛澤東的嚴厲批評。
毛澤東自從住進北京中南海之後，每日忙於政務，空閒時則總是半躺在床上看書。保健醫生以為，毛澤東終日沒有運動，對健康不利。知道毛澤東喜歡游泳，「投其所好」，鼓勵毛澤東在空餘時游泳。
中南海在解放前就有一個露天游泳池，長50米、寬25米，南深北淺。在深水區那邊，還有10米跳台和3米跳板。不過，中南海的工作人員以及家屬都到那裡游泳。考慮到毛澤東的安全，保衛部門只能讓毛澤東在早上游泳池尚未開門或者晚上關門之後去那裡游泳。不過，到了冬日，室外游泳池的水冰涼以至結冰，無法游泳，毛澤東只得改到清華大學的室內游泳池去游泳。清華大學離中南海遠，何況毛澤東一到那裡，需要清場，深感不便。
江青看在眼裡，擅自提議給毛澤東修建室內游泳池。不過，那個游泳池不是建在中南海，而是建在北京玉泉山一號樓，因為毛澤東有時候也住在那裡。據中直修辦處的田恆貴回憶，這個游泳池很小，也就和一個大客廳差不多大。
游泳池造好了，江青滿心歡喜向毛澤東報告，期望毛澤東會非常高興。
出乎江青的意外，毛澤東卻發脾氣了。毛澤東以為，動用公家的錢，為他建造游泳池，那是絕對不允許的。
毛澤東要江青為此事寫檢討。
1954年4月20日，江青給毛澤東寫了一封信，在信中對她擅自提議給毛澤東修建游泳池一事作了檢討。
4月25日，毛澤東把江青的檢討信，轉交劉少奇、陳雲、鄧小平等閱，並寫下一段批示：
劉、陳、鄧、羅瑞卿、尚昆、汪東興諸同志：
江青此信請閱。為補救計，建造費五億由我的稿費中支出，游泳池封閉不用。
毛澤東 1954年4月25日[170]
毛澤東批示中所說的「建造費五億」，是指當時的舊人民幣計算的。中國人民銀行從1955年3月1日起發行新人民幣（也就是現在所用的人民幣。一萬元舊人民幣，相當於一元新人民幣）。所以，「建造費五億」，也就相當於五萬元新人民幣。五萬元人民幣在1954年是相當大的數字！
江青一連受到兩次打擊，心境也就變得益發沉悶。她仍處於養病之中。
1954年6月24日，毛澤東在寫信給堂弟毛澤榮（又名毛勝五）的時候，提及「江青病況略有進步」：
勝五弟：
你給我的信都收到了，很高興。江青病況略有進步，她對你的關懷，甚為感謝。孩子們都好。你們都好嗎？
祝進步
毛澤東 1954年6月24日
1954年10月1日國慶節。江青跟隨毛澤東在天安門城樓上觀看閱兵式、表演和煙火。赫魯曉夫來了。周恩來很注重禮節，走過來要把江青介紹給赫魯曉夫。
這時，毛澤東突然站了起來，走向江青，把江青領到沿城樓邊的一處地方，避免她與赫魯曉夫見面。
這件事也給江青的心裡留下了陰影。這表明，毛澤東不願把江青作為「第一夫人」介紹給赫魯曉夫，避免江青以「第一夫人」的身份出現在蘇聯媒體的報道之中。