後霍光成為朝政實際上的決策者。在昭帝時期，霍光得到漢昭帝的全面信任，因而得以獨攬大權，他採取休養生息的措施，多次大赦天下，鼓勵農業，使得漢朝國力得到一定的恢復。對外也緩和了同匈奴的關係，恢復和親政策。這段時期和後來的宣帝朝被合稱昭宣中興，史家認為西漢自文景之治後被武帝窮兵黷武政策所耗空的國力在這段時間得到了恢復。
元平元年（前74年）夏四月癸未日，漢昭帝駕崩，他沒有兒子。霍光迎立漢武帝孫昌邑王劉賀即位，但二十七日之後就以**無道的理由報請上官太后廢除了他。霍光同群臣商議後決定從民間迎接武帝曾孫劉病已（後改名劉詢）繼承帝位。這就是漢宣帝。霍光效法殷商伊尹，行廢立天子之事，從此後人合稱為“伊霍”。
漢宣帝即位初，霍光表示要歸政於帝，但宣帝沒有接受，朝廷事務的決策仍先經過霍光過問再稟報皇帝。宣帝對霍光表面上很信任，但內心十分忌憚，與之同車時“若有芒刺在背”。霍光本人功高震主，為後來的全家族滅埋下了禍根。漢宣帝即位後，沒有依照群臣提議立霍光之女霍成君為皇后，而是委婉的以尋故劍的名義表示要立自己的元配妻子許平君為�