卻說許後死得不明不白，外間已經有人議論，又見淳於衍得釋出獄，忽然發了一筆大財，大眾早猜到其中必有原因。
及霍氏得立為後，眾人恍然大悟，但礙著霍光尚在不敢多言。如今霍光已死，便有人將此語到處傳播，宣帝聽說後也覺可疑，暗想此言如果屬實，必須嚴行究辦，為許後報復冤仇。只是眾口喧傳未得實據，且霍氏子弟佈滿朝廷，手握兵權勢力甚大，要想懲治也難下手。如今既有此等風聞，霍氏萬難親信，須趁此時削其權力免貽後患，於是召魏相等密議處置之法。
當時度遼將軍範明友為未央衛尉，中郎將任勝為羽林監，還有長樂衛尉鄧廣漢，光祿大夫散騎都尉趙平，統是霍光女婿。光祿大夫給事中張朔系霍光姊夫，中郎將王漢系霍光孫婿，宣帝先徙範明友為光祿勳，任勝為安定太守，張朔為蜀郡太守，王漢為武威太守；復調鄧廣漢為少府，收還霍禹右將軍印，陽尊為大司馬；特命張安世為衛將軍，所有兩宮衛尉，城門屯兵，北軍八校尉盡受張安世節制。又將趙平的騎都尉印綬也一併撤回，但使為光祿大夫。另使許、史兩家子弟代為軍將。
霍禹見宣帝奪其兵權心中憤鬱，於是稱病不肯入朝。一日大中大夫任宣前來拜訪。霍禹便命請入。任宣曾為霍氏長史，聽說霍禹有病故來看視。任宣見霍禹並無病容，便故意用言挑道：“未知君候身患何病？”霍禹聽了長嘆道：“我有甚麼病症？只是心下不甘。”霍禹呼宣帝為縣官，又信口譏評道：“縣官非我家將軍怎得到此？今將軍墳土未幹就將我家疏斥，反任許史子弟奪我印綬，究竟我家有甚麼大過呢？”任宣聞言勸解道：“大將軍在日親攬國權，生殺予奪操諸掌握，就是家奴馮子都王子方等也受百官敬重，比丞相還要威嚴。大凡盛衰各有其時，今許、史乃天子骨肉自然當貴。大司馬因此怨恨，愚意以為不可。”霍禹被任宣說了一通默然無語。過了數日病假已滿，霍禹只得照舊入朝。
卻說霍山、霍雲等見勢力日孤，便常與霍顯、霍禹商議，往往相對啼泣自相埋怨。霍山說道：“今丞相用事縣官信之，竟將大將軍所定法令盡行變易，一班儒生多系貧人客居長安，飢寒交迫喜為妄言，素為大將軍所惡。今儒生人人都能上書請見，而且多言大將軍過失。主上肯定不信任我輩了。”霍顯勃然道：“這是魏丞相唆使要滅我家，難道他果無罪過麼？”霍山說道：“丞相生平廉正卻是無罪，我家行為不謹容易受謗，最可怪的是都中爭言我家毒死許皇後，究竟此說從何而來？”霍顯便把他們引至內室，具述淳於衍下毒實情。霍禹等不覺同聲急語道：“這！這！……這事果真麼？奈何不先行告知！”霍顯也覺愧悔，把一張粉臉急得紅一塊青一塊，就如無鹽嫫母一般。後人有詩嘆道：
不經貪賊不生災，
大禍都從大福來；
莫道陰謀人不覺，
空中天網自恢恢。
霍山及霍雲回到家中，便將霍顯言語告知家人，家人聽說後無不驚恐。正在舉家慌張之際，霍雲至友張赦來到他家，見其家人神色張惶，便為霍氏想得一計，說道：“今丞相與平恩侯擅權用事，可請太夫人速白上官太後，誅此兩人翦去宮廷羽翼。天子勢孤，上官太後一詔便可廢去。”霍雲欣然受教，張赦也即告別。
不料隔牆有耳，張赦計謀竟為家中馬伕所聞，夜間告訴其他馬伕。他們本是一班粗人，說完統去就寢。
卻說有個潁川人名叫張章，曾在長安充當亭長，因事失官流落四方，記起與霍氏馬伕相識，遂尋見馬伕具言來意。馬伕便留他在馬櫪旁下榻。張章聽得眾馬伕相聚談論，心中不由暗喜道：“我如今機會到了！”
朦朧半晌已報雞聲，張章照著馬伕言語打定腹稿，一到天明便與馬伕作別，自去繕成一書北闕呈入。
霍顯夜來神思不寧，夢見霍光與語道：“汝知兒被捕否？”霍光果真有靈，應當先活捉姦夫馮子都，這全是霍顯驚慌所致。霍禹也夢見車聲馬聲前來拿人。母子清晨起床互述夢境，都很擔憂。又見宅門無故自壞；屋瓦無風自飛；種種怪異不可究詰。
霍氏聽說有人上書後越覺驚惶。遂使諸女各自歸家報告其夫，勸其同謀舉事，並說將來禍發誰也無處躲避。霍氏諸婿只得依允。待中金賞乃金日磾之子霍光女婿，聽說此事後立即上書自請去妻。
宣帝不能再容，當即派吏四出，凡霍氏家族親戚一體拿辦。霍山、霍雲及範明友自知無可逃避，各尋自盡。
【鑑於大環境如此，本站可能隨時關閉，請大家儘快移步至永久運營的換源App，huanyuanapp.org 】
霍顯、霍禹、鄧廣漢等措手不及皆被下獄。經廷尉訊出真情立即行刑，霍禹被處腰斬，霍顯也遭誅，所有霍氏諸女及女婿孫婿悉數處死。所有近戚也輾轉連坐，誅滅不下千家。馮子都王子方等當然做了刀頭鬼。馮子都陰魂又好與霍顯取樂去了。惟金賞已經去妻，倖免株連；張章受封博成侯，張章平地封侯最為僥倖。
宣帝下詔有司廢去霍後移居昭臺宮，霍後並未生育子女。又過十二年，宣帝將其再移雲林館。
霍成君生於王侯之家，與漢宣帝強強聯姻，看似風光無限，實則隱患頗多。劉病已為了拉攏霍光，所以不得不立霍成君為後。霍家貪圖權力，結親皇家。這種功利性婚姻，始於利益，終於利益。
身為王侯之女的霍成君，自一出生，她的命運便與整個家族的利益，緊緊聯絡在一起。她的婚姻對於整個霍氏一族來說，是幫他們獲取更多好處的籌碼。至於霍成君個人的幸福，並不在他們家人的考慮範圍之內。或者說在霍家人的心裡，只要有權便有幸福。
所以命運始終不掌握在自己手中的霍成君，成了一顆任人擺佈的棋子。她與劉病已的幸福婚姻生活，只有短短5年的光景。而這種幸福，是在霍家強大的保護傘下才有的。霍氏一族被滅，她的幸福如泡沫般消失不見。為何沒有追隨家人而去，那是因為她的心中還有隱隱的期待。
結果12年的苦苦等待，換來的是一個要命的詔書，霍成君絕望了。以前她父母在時，她將父母當作自己的精神依賴，父母走後，她將劉病已當作自己的精神支柱，可現在她還能依賴誰呢?
生命的最後，霍成君終於認清了自己，終於當了一次自己命運的主宰，她毅然決然地選擇了自盡，成全了劉病已的故劍情深。霍後死後，葬於昆吾亭東。
縱觀霍成君短短的一生，15歲嫁與漢宣帝，20歲被廢后，33歲自盡，如煙花般絢爛，卻比煙花還寂寞。
卻說張安世有孫女名敬，嫁於霍氏親屬，適值霍氏謀反，孫女也應坐罪。張安世一向小心，今見霍氏謀反族誅，更兼孫女牽連在內，自己算與霍氏有親，難免株累，因此心中愁苦。他年紀已老，禁不起憂慮，不過數日，容貌便瘦了許多。宣帝見他如此情形十分詫異，於是問左右是何緣故。左右便將詳情訴說一番。宣帝即命赦了張安世孫女以慰其意。張安世想起霍氏敗亡都因權勢太盛。現在主上英明，自己領尚書事是個重要職務，一舉一動須與霍氏相反方可保全。從此張安世辦理政務格外謹慎周密，每遇重大政事必先入見宣帝，議定辦法後再詔令釋出。
安世曾向宣帝薦舉一人，其人聞知後來見張安世，面謝提拔之恩。張安世聽了大以為恨，說道：“舉薦賢能乃是應為之事，豈有私心，何必來謝？”又有郎官功勞甚高不得升擢，自向安世申說。安世答道：“足下功高，明主自能知悉，此人臣當盡之職，何得自誇？”郎官聽後只得無言退去。安世拒絕郎官之請，入見宣帝時卻又陳述郎官之功，不久郎官果得升擢。
宣帝又想起張安世之兄掖庭令張賀，從前待已有恩，即位以來尚未報答。張賀有一子早死，遺有一孫，年紀甚幼，便以張安世小兒子彭祖為嗣。宣帝自幼與彭祖同窗讀書，於是欲封彭祖為侯，張安世上表固辭。宣帝道：“吾自為掖庭令，非為將軍也！”張安世聽了不敢再言。宣帝又為張賀置守冢三十家，親自指定地方令其居住。
宣帝既廢霍後，欲就後宮擇立一人為皇后。是時後宮妃嬪得寵者三人，一為華捷妤，生有一女，後封館陶公主；一為張婕妤，生一子名欽，後封淮陽王；一為衛捷好，生一子名囂，後封楚王。此三人中，張婕妤尤為愛幸。宣帝想起太子奭幼年失母，幾為霍後所害，今若立後不慎，恐太子又遭毒手。況此三人自己都生有子女，欲其撫愛太子恐是難事，不如選擇平日為人謹慎未曾生子者立之，方免後患。宣帝主意既定，遂下詔立王捷妤為皇后，使之撫養太子。
王捷妤乃長陵人，其先代本居沛縣，隨高祖入關有功，賜爵關內侯。傳至王婕妤之父王奉光，少時性喜鬥雞，宣帝在民間時常與他聚會相識。王奉光有女年十餘歲，已經許字他姓，臨出嫁時其夫忽死，如此一連數次，剋死了幾個未婚夫，以致無人敢娶。及宣帝即位，王奉光女兒尚未適人，宣帝追懷舊誼發生異想，把她召入後宮立命侍寢，賜過幾番雨露卻又無恙。宣帝也不怕死，想王女命中應配皇帝。後來霍後入宮，張婕妤又復繼進，宣帝無暇顧及王女，王女冷落宮中少得入御。這次宣帝冊她為繼後，就把太子劉奭交付給她撫育。太子遂依王后過日，宣帝又使疏廣、疏受為傅，太子得保無事。
宣帝不想皇后生兒子，所以很少與她相見。張婕妤等引作笑談。王女雖得為後卻不見宣帝寵遇，但王女安處深宮毫不爭寵，一些兒沒有怨言。張婕妤等仍得相安，由她掛個虛名罷了。王女得立皇后。宣帝封其父王奉光為邛成侯。
很多人都為漢宣帝抱不平，認為他為了保護自己與許平君的孩子而娶了個自己不愛的人做皇后，這是一件非常悲哀的事。其實立王皇後為後，對宣帝的生活並沒有什麼影響，他仍然可以寵愛別人；相反一個嫁為人妻的女子，不僅無法得到丈夫的愛，還要撫養別人的孩子，這才是最痛苦的！