因為錦帛上的內容是劉賀所親自撰寫的，所以對於一些事情的經過描寫得十分細致，但卻偏偏有一個地方被一筆帶過，那就是在他被監禁的第五年，漢宣帝登基，此時他的身邊卻突然出現了一個吳先生。

　　對於這個吳先生的出現劉賀寫得十分模糊，只有一句當夜與吳生相見，共商大事，連出現的過程都沒有，顯得相當突兀。

　　並且，自從吳先生出現後，便一直陪在劉賀左右，為他出謀劃策。而劉賀對其也是言聽必從，甚至連裝瘋賣傻的要求都一口答應，看得出對於那位吳先生可以說是信任到了極點。

　　就這麽過去了一段時間，在他們二人的謀劃下，霍光被成功欺騙，以為劉賀已經沒有什麽威脅，所以便恢復其侯位，分封到了南昌附近，命為海昏侯，掌管一方土地。

　　這一次劉賀終於學聰明了，在恢復侯位之後，他聽取了吳先生的意見，保持了足夠的低調，每天深入簡出，基本從不在人前露面，就連封國內的事務也全部交由臣子處理。而這種行為也讓霍光頗為滿意，終於收了殺心，撤銷了對劉賀的監視。

　　而劉賀那邊也很清楚這一點，不過礙於霍光的勢力，他們仍舊不敢有什麽動作，只能慢慢等待機會，尋找時機翻身。果然，就在兩年後，霍光身體越發不堪，終於在當年冬季病亡，由漢宣帝與上官太后主持喪事，以皇帝之禮葬於茂陵。

　　在得知這一消息後，劉賀心中一動，便打起了那座陵墓的主意。但因為手中無兵無權，縱使他有心報復，也根本沒那個能力去掀翻霍光的陵墓。不過就在他苦惱的時候，那位吳先生卻找了過來，竟是主動提出要幫他盜墓。

　　這一下可把劉賀給高興壞了，不過興奮之余，他多少還是有些納悶，因為這件事情他也只是想想罷了，並沒有向外提起過。而吳先生也看出了劉賀的疑惑，當下倒也乾脆，直接承認說需要墓裡面的一件寶物，希望到時候劉賀能夠賞賜給他。

　　一聽原來是這個理由，劉賀倒也沒有什麽懷疑，當即同意下來，並且賞賜了五千金作為經費，讓吳先生全權負責此事。這吳先生也不是什麽簡單人物，他招募了數百人，直接將霍光陵墓附近的一個村子屠殺殆盡，偽裝成村民，歷時三個月之久，終於從地下打出了一個通入主墓室的盜洞。

　　這時候劉賀也得到了消息，馬不停蹄的趕到了那裡，在吳先生的陪同下進入了墓室，並且用一種特殊的手段將霍光的屍體取出，封存到了這裡，利用蛟穴的煞氣來影響霍家。

　　果然，就在霍光屍體被埋入這裡的半年後，霍家謀反之事敗露，被漢宣帝下旨滿門抄斬，慘遭滅族。而劉賀也終於出了一口惡氣，並將霍光之前的墳墓改造了一下，以留作將來自己下葬之用。至此，兩人之間的恩怨糾葛也終於結束，告一段落。