哪知大兒子就是不聽，覺得自己在王宮裡可以為所欲為。有一次，金日磾看見大兒子強行非禮宮女，當眾把宮女身上的衣服撕扯，金日磾見此情形，勃然大怒，對於自己大兒子的淫亂行為實在忍無可忍，於是走過去，一腳把大兒子踹倒在地，拔出劍，一把將自己的大兒子，當場殺死。
漢武帝還沒有認識是何原因，知道弄兒被其父殺死，怒斥金日磾，經金日磾頓首陳明緣故，漢武帝方才轉憤怒為悲哀，但從此以後亦更加看重金日磾。
金日磾自從在漢武帝身邊，幾十年從不用目光直視漢武帝。漢武帝賞賜給他宮女，也不敢親近。金日磾有個女兒，已經到了及笄之年，漢武帝想要把他的女兒納入後宮，偏偏金日磾就是不肯奉詔。漢武帝因此認為金日磾的為人篤厚謹慎，有氣節，為此待遇日隆。真是難得有此好胡兒！一些人都巴不得攀附皇帝，讓女兒入後宮服侍皇帝，偏偏金日磾如此。不過也是，身為一個端正的父親，怎麼會為了自己利益，問都沒有問就把自己女兒嫁一個七十來歲的老年人，哪怕是皇帝。也難怪漢武帝會認為他的行為特別奇異少見，但是也因此漢武帝劉徹特別看重他。
只是漢武帝遭馬何羅謀反刺殺案一嚇，愈發覺得心緒不寧，自思太子劉據死後，尚未立儲，一旦自己駕崩，何人繼位？膝下尚有三男，不若少子劉弗陵，體偉姿聰，與自己相類；不過年尚幼稚，其母鉤弋夫人，又正值青年，將來子得為帝，必思干政，恐不免為呂后第二。想來想去，只有先擇一大臣，交付託孤重任，眼前惟有霍光、金日磾兩人，忠厚老成，可屬大事。但金日磾終究是匈奴胡人出身，不足於服眾，不如授意霍光，叫他預知。
於是漢武帝特使黃門，繪成一圖，賜與霍光。
霍光，字子孟，河東郡平陽縣（今山西省臨汾市）人。是大司馬霍去病之異母弟。
霍光的父親名叫霍仲孺，後元三年（前141年）前後，以縣中小吏身份被派到平陽侯家服役。霍仲孺和平陽侯府中侍女衛媼之女衛少兒私通生下一子霍去病。霍仲孺後返家，另娶妻子，生下霍光，和衛少兒不再來往。
元狩二年（前121年），霍去病被拜為驃騎將軍，在出擊匈奴的途中，被河東太守出迎至平陽侯國的傳舍，並派人請來霍仲孺與之父子相見。霍去病替霍仲孺大量購買田地房屋和奴婢後離去。霍去病此次出征凱旋時，再次拜訪霍仲孺，並將異母弟弟霍光一起帶到長安照顧。霍光當時年僅十多歲，在霍去病的幫助下，先任郎官，隨後遷任各曹官、侍中等。
元狩六年（前117年），霍去病去世。霍光升任奉車都尉、光祿大夫等職位，侍奉漢武帝左右，前後出入宮禁二十多年，小心謹慎，未曾犯一次錯誤，因此得到漢武帝的信任。
時，徵和二年（前91年），衛戾太子劉據被江充以巫蠱之禍逼死後，漢武帝決定立鉤弋夫人之子劉弗陵為儲君，並在仔細觀察後，認為只有霍光能夠擔負託孤重任。一次，漢武帝令黃門畫工繪《周公輔成王朝諸侯圖》賜給霍光，暗示他準備輔政。
霍光蒙賜圖畫，拜受回家，展開一覽，是周公負扆輔成王朝諸侯圖，即揣知漢武帝微意。圖既不便奉還，且領受了再說。
漢武帝見霍光受圖退去，不復再請，當然欣慰。
第二日，漢武帝便想處置鉤弋夫人，故意尋隙加以譴責，鉤弋夫人連忙脫簪謝罪，漢武帝竟翻轉臉色，叱令左右侍女，把她牽扯出去，送入掖庭獄中。鉤弋夫人入宮以後，從未經過這般委屈，此時好似晴天霹靂，出人意外，不由的珠淚盈眶，頻頻回顧。
漢武帝見她愁眉淚眼，也覺可憐，不得已揚聲催促道：“去去！汝休想再活了！”
實是奇想。鉤弋夫人還欲再言，已被侍女牽出，送交獄中，是夕即下詔賜死。
而北魏屢有此例，不意自漢武帝作俑。一代紅顏，無端受戮，只落得一杯黃土。
據說鉤弋夫人被漢武帝賜死，出殯以後，屍體不發臭，並且散發香氣，香氣飄到十多里外。於是把她安葬在雲陵，漢武帝哀悼她。漢武帝又懷疑她不是普通的人，就掘墓開棺來看，結果棺裡是空的，沒有屍體，只留下一雙鞋子。或謂鉤弋夫人尸解成仙，無非是可惜她是枉死，故有是說。
鉤弋夫人去世後，漢武帝思念她，便在甘泉宮修建了一座通靈臺。之後常有一隻青鳥飛來，在臺上棲息徘徊。
鉤弋夫人趙氏死後，漢武帝在清閒無事時詢問身邊的人，說：“人們對趙氏之死有什麼看法。”
左右人回答說：“人們說將要立她的兒子，為什麼除去他的母親？”漢武帝說：“對。這不是一般兒輩愚人所能懂得的。從古到今國家起內亂的原因，是因為人主年小而母親年壯。女主人獨斷驕橫，淫蕩放肆，沒有人能阻止她。你們沒聽說過呂后的故事嗎？”
左右之人聽了，方才無言。
又過了一年，漢武帝因春日閒暇，就赴五柞宮遊覽，宮有五柞樹，蔭複數畝，故以名宮。
漢武帝流連景色，一住數日，不料風寒砭骨，病入膏肓，遂致長臥不起，無力回宮。
霍光隨侍在側，流涕啟問道：“陛下倘有不諱，究立何人為嗣？”
漢武帝聞言，答道：“君未知前日畫意麼？我已決立少子，君行周公事便了。”
霍光頓首道：“臣不如金日磾。”
金日磾當時亦在皇帝旁邊，於是應聲道：“臣是外國人，若輔幼主，徒使外人看輕，不如霍光遠甚。”
漢武帝道：“汝兩人素性忠純，朕所深知，俱當聽我顧命。”
。拜下前榻至都，詔奉人五，政輔同一史相丞與，軍將左為桀上，軍將騎車為磾日金，軍將大馬司大為霍進，子太皇為陵弗劉立，出頒日翌，詔草臣侍令便乃。政輔他令當亦，信親可頗，桀上僕太有尚，外羊弘桑夫大史，秋千田相丞除，臣大上朝想又帝武漢，下退才方人二
”？麼馬見復不我謂汝“：道罵怒桀上向便，瘦多馬見。馬看來便，愈帝武知誰。去下懈疏便桀上，中廄到不日幾好，病患帝武漢而既。養餵加勤，意留外格桀，馬閱廄嘗帝武漢，令廄央未遷，郎門期林羽由，氏人邽上繫桀，進後為最桀上，資的人五這。事辦外出令下便，答作首頷是只，言多能不，危垂已病帝武漢
”。罪恕下陛乞，馬餵心無以所，懼憂夕日，安不聖聞臣“：道言上首叩，伏跪忙慌桀上
。文下伏暗。了品的桀上知可就，此閱看。僕太任得，加功有，弟兄通馬獲捕至，尉都騎為使擢更，罪免他將但不，靠可誠忠他道便，罷聽帝武漢
。傳訛是都種這。去解尸隨帝武漢疑懷遂，世人現出復又，各葬殉有還；幸臨帝武漢見仍間夜，制守園陵至多，妾妃宮後，陵茂葬奉來後；般一過吃乎似，菜祭晚早，殿前央未至棺移，後崩駕帝武漢謂或人後。允公斷論！呢著末在就差相，亡致道無的世二秦若不，子位傳帝武漢獨。稱並今古，武漢皇秦以所；祚國保借，託付人得，過悔知自，詔一臺年晚得虧。親無外，困下上己自得落終，民人暴，吏酷臣用任，遊巡好喜，禪封次多，室營宮築，仙求漁是只。威揚土拓能也卻，餉糜師勞免未然雖，兵用歲連，夷四伐征如即，子主的明英位一是本，樂詩作，律音協，數歷定，朔正改，祀郊修，學太興，儒重，經六章表，家百黜罷帝武漢稱史。次一十元改計共，年六十五位在，歲一十七終壽，宮柞五崩駕即宿越，留彌已病，命顧傳既帝武漢說且
！子頭個是卻”！呢得可不卻璽，得可頭臣“：道劍佩住按竟郎那，得奪便，璽著執中手他見，說與暇不霍，付肯不，命如璽玉視亦郎璽符尚偏，取索以所，要重關最璽以意霍。璽取他向。之璽掌，郎璽符尚召出，起即報聞，著睡和霍，怪有中殿是說，報人有半夜，夕數了過知那。議商酌斟軍將兩政輔有還，商參等史相丞與事外。憂無可當，理料主公長蓋歸，屑瑣事？禍下種又知誰。駕伴宮日即，主公長蓋為主公邑鄂封加是於。帝昭漢持護，宮暇乘可正，管多必不，信文子嗣有已中家，居寡在方，主公邑鄂姐長帝昭漢為，室妻充王侯蓋只，恃難屬都，嬪宮有所外此，死賜被早已，人夫弋鉤母帝，料照人需，居起食飲，年帝昭漢思且。移敢不，定有俱坐行，著住中殿在夕日，測不有防，疑國主見因，事書尚兼，袖領臣大命顧為霍。持主等霍歸均，件事小大論無，政親能未，歲八剛年帝昭漢。帝昭漢為是，位即陵弗劉子太奉，詔著依，等霍軍將大
”！璽取要曾何，手人落輕汝恐過不我！說何有尚，璽住守能汝“：道然爽始霍
。下天赦大，帝皇武孝為帝先諡，后太皇為人夫弋鉤尊追乃霍。樑棟作倚，正公霍服始民臣，等二祿俸郎璽符尚加，詔下製承霍由即日是。了常如靜安卻，明天到待，異怪麼什有沒並，齣一令此。斬即命違，譁喧自妄得不，衛宿中殿令傳乃霍。退乃，畢說”！私肯不死寧，在所職臣“：道郎
：道詠詩有
；殘年惜詔一臺，難過改難非過知
。寒不語寒雖骨，士誠忠得幸孤託
。敘詳回下至待？誰為首禍知，案的反謀起一生發便，間年一這。年元元始為號，元改例照，年一過已久多沒
