卻說上官桀父子，為了丁外人不得封侯，恨及霍光。就是蓋長公主得知此信，也怨霍光不肯通融，終致情夫向隅，無從貴顯，於是內外聯合，視霍光如眼中釘。
霍光尚未知曉，但照己意做去，忽然由昭帝劉弗陵自己下詔，加封上官安為桑樂侯，食邑千五百戶，霍光也未預聞，惟念上官安為皇后之父，得受侯封，還好算是常例，並非破格，所以不為諫阻。女婿封侯，丈人亦加榮寵。
上官安卻越來越驕橫淫逸。有時他在殿上領受賞賜，出來後就對賓客說：“和我的女婿一起喝酒，真快活！”炫耀所得的服飾，派人拿回家裡，打算自己焚燒供品祭神。
上官安喝醉了酒，就光著身子在內宅行走，和他的繼母以及父親的姬妾侍婢淫亂。他的兒子病死了，就仰面怒罵上天。
上官安屢次向霍光請求給丁外人封侯，其父上官桀也妄想給丁外人加官晉爵，霍光秉公辦事，都沒有同意。上官桀妻子的父親寵愛的充國是一名太醫監，擅自跑到殿上，被捉拿下獄，按法律應當處以死罪。
冬天快要過去的時候，蓋長公主替充國交納二十匹馬以贖罪，這才免去他的死罪。因此上官桀、上官安父子深深地怨恨霍光，而感激公主的恩德。他們得知漢昭帝的哥哥燕王劉旦因沒有被立為皇帝，也心存怨恨，上官桀和上官安就記錄下霍光的過失告訴給燕王，讓他給漢昭帝上書告發霍光，並替丁外人求侯爵之位。
燕王劉旦大喜，於是上書聲稱：“子路的姐姐死了，一週年後他還不脫掉喪服，孔子批評他。子路就說：‘我不幸，沒有兄弟，因此不忍心脫掉為姐姐穿的喪服。’所以說‘看人的過失，可以知道他仁與不仁。現在我和陛下只有長公主一位姐姐，陛下隆恩讓丁外人侍奉公主，丁外人應當封賞爵號。”
會值霍光出赴廣明，校閱羽林軍，上官桀即與桑弘羊熟商，意欲趁此發難；但急切無從入手，不如詐為燕王劉旦書，彈劾上奏霍光的過錯罪惡，便好定罪。商議已定，當由桑弘羊代繕一書，擬即呈入。不意霍光已經回京，那時只好順延數日，等到霍光回家休沐，方得拜本進去。
是年本為始元七年，因改年號五鳳，稱為五鳳元年，這個時候，漢昭帝劉弗陵已經十四歲，接得奏牘，見是燕王劉旦署名。內容有云：
臣聞大司馬大將軍霍光，出都校閱羽林郎，道上稱蹕，令太官先往備食，僣擬乘輿。前中郎將蘇武，出使匈奴，被留至二十年，持節重歸，忠義過人，盡使為典屬國。而大將軍長史楊敞，不聞有功，反令為搜粟都尉。又擅調益幕府校尉，專權自恣，疑有非常。臣旦願歸還符璽，入宮宿衛，密察奸臣變故，免生不測。事關緊急，謹飛驛上聞。
漢昭帝劉弗陵看了又看，想了多時，竟將來書擱置，並不頒發出來。上官桀等候半日，毫無動靜，不得不入宮探問，漢昭帝但微笑不答。少年老成。翌日霍光進去，聞知燕王劉旦有書糾彈，不免恐懼，乃前往殿西畫室中坐待訊息。畫室懸著周公負扆圖，霍光詣室坐著，也有深意。少頃，漢昭帝臨朝，左右旁顧，單單不見霍光，便問大將軍何在？上官桀應聲道：“大將軍被燕王旦彈劾，故不敢入。”
漢昭帝亟命左右召入霍光，霍光至帝座前跪伏，免冠謝罪，但聞漢昭帝面諭道：“將軍儘可戴冠，朕知將軍無罪！”
胸中了了。霍光且喜且驚，抬頭問道：“陛下如何知臣無罪？”
漢昭帝道：“將軍至廣明校閱，往返不到十日，燕王遠居薊地，怎能知曉？且將軍如有異謀，何必需用校尉，這分明就是有人謀害將軍，偽作此書。朕雖年少，何至受愚若此！”
霍光聽說，不禁佩服。此外一班文武百官，都不料如此幼主，獨能察出個中情弊。雖未知何人作偽，也覺得原書可疑，惟上官桀與桑弘羊，懷著鬼胎，尤為驚慌。待至霍光起身就位，漢昭帝又命將上書人拿究，然後退朝。
上書人就是上官桀與桑弘羊差遣出來，一聞詔命，當即至兩家避匿，如何破獲？偏漢昭帝連日催索，務獲訊辦。上官桀又進白昭帝言道：“此乃小事，不足窮究。”
漢昭帝不從，仍然嚴詔促拿，且覺得上官桀有二心，自此與他疏遠，只是親信霍光。
上官桀憂恨交迫，囑使內侍訴說霍光罪過，漢昭帝劉弗陵發怒道：“大將軍是當今忠臣，先帝囑使輔朕，如再敢妄說是非，便當處罪！”
任賢勿貳，漢昭帝確守此言。
內侍等碰了釘子，方不敢再言，只好回覆上官桀。上官桀索性想出毒辣陰謀，與兒子上官安秘密商議數次，竟擬先殺霍光，繼廢昭帝，再把燕王劉旦誘令入京，刺死了他，好將帝位據住，自登大寶。
確是好計，可惜天道難容。一面告知蓋長公主，但說要殺霍光，廢昭帝，迎立燕王劉旦，蓋長公主卻也依從。上官桀復請蓋長公主設席飲光，伏兵行刺。更遣人通報燕王劉旦，叫他預備入都。
燕王劉旦大喜過望，復書如約，事成後當封上官桀為王，同享富貴，自與燕相平商議進行。平諫阻道：“大王前與劉澤結謀；澤好誇張，又喜侮人，遂致事前發覺，謀洩無成。今左將軍素性輕佻，車騎將軍少年驕恣，臣恐他與劉澤相似，未必有成。就使僥倖成事，也未免反背大王，願大王三思後行！”
燕王劉旦尚未肯信，且駁說道：“前日一男子詣闕，自稱故太子，都中吏民，相率喧譁。大將軍方出兵陳衛，我乃先帝長子，天下所信，何至慮人反背呢！”
平乃無言而退。過了數日，燕王劉旦又語群臣道：“近由蓋長公主密報，謂欲舉大事；但患大將軍霍光與右將軍王莽。今右將軍已經病逝，丞相又病，正好乘勢發難，事必有成，不久便當召我進京，汝等應速辦行裝，毋誤事機！”
在此說明：言中的王莽和漢成帝時期的王莽不是同一個人，在此說明。他們是兩個人，並且生活的時間是不一樣的，隔幾代皇帝呢。
眾臣只好聽命，各去整辦。偏偏天象告警，燕都裡面，時有變異。忽然大雨傾盆，有一道彩虹下垂到宮井，井水忽然乾涸，大眾譁言井水是被彩虹飲盡；彩虹能飲水，真是奇談。又忽然有一群豬突然衝出廁中，闖入廚房，毀壞灶觚；又忽然有烏鵲爭鬥，紛紛墜死在池中。又忽然鼠噪殿門，跳舞而死，殿門自閉，堅不可開，城上無故發火；又有大風吹壞城樓，折倒樹木。夜間墜下流星，聲聞遠近，宮妃宮女，無不驚惶。
燕王劉旦亦嚇得成病，使人前往祭祀葭水臺水，有門客呂廣，善佔休咎，入語劉旦道：“本年恐有兵馬圍城，期在九十月間，漢廷且有大臣被戮，禍在目前了！”
劉旦亦失色道：“謀事不成，妖象屢見；兵氣且至，奈何！奈何！”
。盡於歸同，虛不實真然果。信音實確聽探人腹心遣再，床起疾力，汗冷一出嚇旦劉。了住拘被均，等之縱孫使燕並；人多坐連，敗謀逆，子父桀上是乃。來傳安長從，報急有然驀，間慮憂正
。賞慶備預，功待坐子父桀上。死刺他將，酒飲霍邀，議計桀上了聽，主公長蓋是先
”？后皇置何如來將，事大此行子父君“：道說安上和下私人黨有，意得常非，子太為好然當己自，帝為得父為以且安上
”？過錯可怎，會機的時一載千乃今。得可不且，民平為求使就，變意主人旦一；顯貴邀得，后皇著靠子父我想試？麼兔顧暇還犬麋逐“：道然安上
！敗失朝一，營經載數致遂，霍告遽，謀輩若知得竟，年延杜夫大議諫料不。止不笑大且，著說？滅族至何，是如不
。發告年延杜被遂，達傳轉輾，悉窺先首，人舍的邊主公長蓋為子一有獨，居閒職卸，者使田稻充前之蒼燕。聞傳蒼燕由敞楊，的來得敞楊尉都粟搜從是，告報的年延杜這
