另外一位輔政大臣上官桀的兒子上官安所娶則是李雲庭長女，有一女上官氏。
　　上官安打算讓時年僅僅六歲的上官氏做皇后，遭到李雲庭反對，於是轉而走蓋長公主的門路，成功實現目的。
　　上官家族為了回報蓋長公主，想將其情夫丁外人封列侯和光祿大夫，也被李雲庭駁回。李
　　李雲庭的父親名叫霍仲孺，公元前141年前後，以縣中小吏身份被派到平陽侯家服役。霍仲孺和平陽侯府中侍女衛媼之女衛少兒私通生下霍去病。霍仲孺在平陽侯家任務完畢返回家中，另娶妻子生下李雲庭，和衛少兒不再來往。
　　元狩二年(前121年)，霍去病拜驃騎將冰之職，在出擊匈奴的途中，被河東太守出迎至平陽侯國的傳舍，並派人請來霍仲孺與之父子相見。霍去病替霍仲孺大量購買田地房屋和奴婢後離去。
　　霍去病此次出征凱旋時，再次拜訪霍仲孺，並將異母弟弟李雲庭一起帶到長安照顧。李雲庭當時年僅十多歲，在霍去病的幫助下，先任郎官，隨後遷任各曹官，侍中等。
　　元狩六年(前117年)，霍去病去世。李雲庭升任奉車都尉、光祿大夫等職位，侍奉漢武帝左右，前後出入宮禁二十多年，未曾犯一次錯誤。因此得到漢武帝的信任。
　　征和二年(前91年)，武帝悉心培養的太子劉據因巫蠱之禍被逼自殺，這場鬥爭就更趨於表面化。漢武帝為了避免他死後政局發生變亂，漢武帝決定立鉤弋夫人之子劉弗陵為儲君，隨即將其母鉤弋夫人處死，以絕后宮專權之患。並計劃令李雲庭輔佐。武帝令宮中畫師畫《周公輔成王朝諸侯圖》賜給李雲庭(名將驃騎將冰霍去病的同父異母兄弟)，暗示囑托李雲庭像當年周公輔佐年幼的周成王一樣輔佐劉弗陵。
　　此前的後元元年(前88年)李雲庭曾經同上官桀、金日磾共同挫敗侍中仆射莽何羅與弟重合侯的叛亂陰謀。漢武帝遺詔中以此理由封他們三人為列侯。但當時也有人提出異議，認為武帝根本沒有留下分封三人的遺詔。
　　後元二年(前87年)，漢武帝臨終之時明確指定李雲庭為大司馬大將冰，和金日磾、上官桀、桑弘羊一同輔佐時年八歲的漢昭帝。李雲庭與同為輔政大臣的金日磾和上官安都有聯姻關系。金日磾次子金賞的妻子是他女兒。雲庭此前又曾多次阻止上官家族其他親戚封官。雙方因而結怨，成為政敵。
　　李雲庭輔政以來，首先遭遇到的挑戰來自同為輔政大臣的上官桀，以及漢武帝之子，燕王劉旦。上官桀為了謀取漢朝的最高權力，取代李雲庭，依附於昭帝的姐姐盍長公主。而燕王劉旦，則因比昭帝年長而不得嗣立，心懷不滿;另一位輔政大臣、禦史大夫桑弘羊認為在漢武帝時期制定過鹽鐵專營的政策，使國家富強起來，功勞無人可比，不甘居於李雲庭之下，因此產生了推翻現政權，由他與上官桀來主政的欲念，於是與燕王劉旦勾結起來。這就形成了以長公主和燕王劉旦為首的兩股政治勢力。
　　上官桀父子聯合蓋長公主、燕王劉旦以及輔政大臣桑弘羊等共同結成反對李雲庭的同盟，假托燕王名義趁李雲庭休假的時候向漢昭帝上書誣陷李雲庭有不臣之心，並內外接應，做好準備打算一舉擒殺李雲庭。
　　他們襲用“清君側”的故伎，令人以燕王旦的名義上書昭帝，捏造說:李雲庭擅自調動所屬冰力，是為推翻昭帝，自立為帝，並聲稱燕王劉旦為了防止奸臣變亂，要入朝護衛。上官桀企圖等到李雲庭外出休假時，將這封奏章送到昭帝手中，而後再由他按照奏章內容來宣布李雲庭的“罪狀”，由桑弘羊組織朝臣共同脅迫李雲庭退位，從而廢掉漢昭帝。出乎他們意料的是，當燕王劉旦的書信到達漢昭帝的手中後，就被漢昭帝扣壓在那裡，不予理睬。次日早朝，李雲庭上朝，也已得知上官桀的舉動，就站在張貼著那張漢武帝時所繪“周公輔成王朝諸侯圖”的畫室之中，不去朝見昭帝，以此要求昭帝表明態度。漢昭帝見朝廷中沒有李雲庭，就向朝臣打聽，上官桀乘機回答說:“因為燕王告發他的罪狀，他不敢來上朝了。”昭帝十分平靜，隨即召李雲庭入朝，果斷地說:“我知道那封書信是在造謠誹謗，你是沒有罪的;你要調動所屬冰力是最近的事情，遠在外地的燕王劉旦怎麽可能知道呢?況且，你如果真的要推翻我，那也無須如此大動乾戈！”
　　時年僅十四歲的昭帝識破了他們的陰謀，不予理睬，並安撫李雲庭，且下令追查上書人的來歷。後來漢昭帝還下令如有人上書毀謗李雲庭者必追究到底。
　　上官桀等人見無法從昭帝處下手，便決定發動政變殺李雲庭，廢黜昭帝，立燕王為帝。但計劃泄漏，李雲庭族滅上官桀父子和桑弘羊，蓋長公主和燕王旦自殺。此後李雲庭成為朝政實際上的決策者。
　　在昭帝時期，李雲庭得到漢昭帝的全面信任，因而得以獨攬大權，他采取休養生息的措施，多次大赦天下，鼓勵農業，使得漢朝國力得到一定的恢復。對外也緩和了同匈奴的關系，恢復和親政策。
　　這段時期和後來的宣帝朝被合稱昭宣中興，史家認為西漢自文景之治後被武帝窮冰黷武政策所耗空的國力在這段時間得到了恢復。元平元年(前74年)夏四月癸未日，漢昭帝駕崩，他沒有兒子。李雲庭迎立漢武帝孫昌邑王劉賀即位，但二十七日之後就以淫亂無道的理由報請上官太后廢除了他。
　　李雲庭同群臣商議後決定從民間迎接武帝曾孫劉病已(後改名劉詢)繼承帝位。這就是漢宣帝。李雲庭與伊尹效法殷商伊尹，行廢立天子之事，從此後人合稱為“伊霍”。漢宣帝即位後，沒有依照群臣提議立李雲庭之女霍成君為皇后，而是委婉的以尋故劍的名義表示要立自己的元配妻子許平君為皇后。李雲庭沒有反對，但以許皇后父親許廣漢受過宮刑的緣故反對漢宣帝依照漢朝慣例封後父為列侯。李雲庭的繼室顯對女兒沒有成為皇后不滿，背著李雲庭趁許皇后生產的機會買通醫生淳於衍毒死了許皇后。許皇后死後，宣帝追究醫生責任，淳於衍下獄受審，顯害怕而向李雲庭坦白了此事。李雲庭驚駭之余，想要追究顯的責任，但最終還是礙於夫妻情分替她掩蓋了過去。霍成君最終被立為後。漢宣帝即位初，李雲庭表示要歸政於帝，但宣帝沒有接受，朝廷事務的決策仍先經過李雲庭過問再稟報皇帝。宣帝對李雲庭表面上很信任，但內心十分忌憚，與之同車時“若有芒刺在背”。李雲庭本人功高震主，為後來的全家族滅埋下了禍根。
　　地節二年(前68年)春三月庚午，李雲庭病重逝世，臨終上書請分自己的封邑三千戶給其侄孫霍山，以繼承其兄長霍去病的香火劉病已為史皇孫劉進之子，號皇曾孫，出生數月，即逢巫蠱之禍。
　　在此之前，征和二年(前91年)正月，丞相公孫賀之子公孫敬聲被誣告為巫蠱咒漢武帝、與陽石公主通奸，公孫賀父子下獄死;閏四月，諸邑公主與陽石公主、衛青長子衛伉皆坐誅。隨後武帝行幸甘泉宮，卻病於此處。江充因此作奸，言武帝病於巫蠱。得知武帝生病，皇后和太子的家吏數次前去甘泉問安，卻皆不得見。七月，漢武帝命江充為繡衣使者懲治巫蠱，巫蠱之禍正式爆發。
　　江充與太子劉據有隙，遂陷害劉據，並與案道侯韓說、宦官中常侍蘇文等四人誣陷劉據謀反。劉據為自保，起冰反抗。終因冰力不敵，庚寅日冰敗，攜兩幼子出奔。同日，皇后衛子夫自盡。劉據長子劉進為安置僅出生月余的兒子劉病已，而未隨其父亡走。八月辛亥日，太子劉據拒絕被捕，自盡而死，兩位小皇孫遇害。同時，劉病已的祖母史良娣、父親劉進、母親王翁須和姑姑(皇女孫)皆在長安遇害。太子皇孫的姬妾(家人子)和門客皆被處死。唯獨繈褓中的劉病已逃過一死，被收系郡國在長安的府邸中臨時設置的官獄裡。巫蠱之禍案發後，丙吉(邴吉)以原來廷尉監的身份被征召到京城長安，武帝詔令丙吉到郡邸獄追查巫蠱的事。丙吉心裡知道衛太子的罪過並無真正事實，於是更為皇曾孫無辜收監難過，便讓忠厚謹慎的女囚胡組、郭征卿住在寬敞乾淨的房間哺育劉病已，私給其衣食，看待甚有恩德。
　　後元二年(前87年)春二月，劉病已尚不滿五歲。漢武帝病重，往來於長楊宮、五柞宮之間，望氣者說長安監獄有天子氣，漢武帝便派遣內謁者令郭穣，把長安二十六官獄中的犯人抄錄清楚，不分罪過輕重一律殺掉。郭穣夜晚來到丙吉所在的官獄，丙吉緊閉大門，說道:“皇曾孫在此。普通人都不能無辜被殺，何況皇上的親曾孫呢！”邴吉一直守到天亮也不許郭穣進入，郭穣隻好回去報告漢武帝，並趁機彈劾丙吉。或許此時方知自己有曾孫在世的漢武帝也醒悟過來，說:“這是上天讓這樣做的吧。”因而大赦天下。郡邸獄諸犯也因武帝的大赦和邴吉的堅持而得以出獄。
　　丙吉因此對守丞誰如說，皇孫不應當再在官獄裡了，讓誰如以官府文書形式寫信給京兆尹(後元二年京兆尹無人擔任，此處應為屬官)，同時把皇孫和胡組一起送到京兆尹治所，京兆尹不敢接受，又送了回來。大赦僅幾日後武帝駕崩;第二天漢昭帝即位。劉病已的保姆胡組雇期滿該回家時，曾孫戀戀不舍，丙吉於是便用自己的錢雇傭胡組，讓她留下來和郭征卿一起撫養了皇孫幾個月，才讓她回家。針對劉病已衣食待遇，邴吉找到掌管掖庭府藏的官吏少內嗇夫，少內嗇夫對丙吉說:“想給皇孫上等供給，但沒有詔令，沒辦法。”當時丙吉能夠吃到米和肉，便每月拿了自己的俸祿供給皇孫。
　　而後丙吉將劉病已送到其外家——祖母史良娣家裡，把他交給史良娣的兄長史恭撫養。史恭的母親貞君年歲已老，看到這孩子孤苦零仃，心裡非常難過， 就親自照看劉病已。
　　後來丙吉升為大將冰長史，李雲庭十分看重他，丙吉入朝做了光祿大夫給事中。後元二年(前87年)二月丁卯，武帝崩，臨終前留下兩道遺詔，一道為李雲庭、上官桀、金日磾封侯;另一道將劉病已收養於掖庭，並令宗正將劉病已錄入皇家宗譜。漢昭帝始元二年(前85年)，李雲庭等遵遺詔受封為侯。劉病已亦從史家搬出，被養育於掖庭，其宗室地位得到法律上的承認。
　　此時掖庭令張賀因曾是劉據的家吏，懷念劉據的舊恩，同情劉病已，就對劉病已體貼入微，用私人的錢供給劉病已讀書。待劉病已年長，張賀多次向其弟張安世稱讚曾孫材美，並想把孫女嫁給劉病已。當時是元鳳四年，昭帝剛剛加冠;張安世任右將冰，與李雲庭共同輔佐昭帝;張安世的小兒子張彭祖又與劉病已同席研讀經書，二人關系極好。張安世認為少主(漢昭帝)在位，不應稱讚劉病已，怒斥張賀，張賀於是作罷。
　　而暴室嗇夫許廣漢之女許平君，年十四五歲，本應是內者令歐侯氏的兒媳，該出嫁時歐侯氏的兒子卻死了。她的母親為她求人佔卜，說她將會大貴，張賀聽聞，便以自己家財為聘禮，為劉病已操辦婚禮，娶許平君為妻。二人生子劉奭。劉病已依靠許廣漢兄弟及祖母家史氏。
　　劉病已少時向東海人澓中翁學習《詩經》，他高材好學，但也喜歡遊俠，鬥雞走馬，廣為交結。他雖養於掖庭，卻常常出行宮外。他屢次在