后，将自己的女儿顺利地送进皇宫，最终成为了皇后。事后，霍光知道了此事，没有做任何补救。
汉宣帝也听说了一些传言，他没有去查实，因为他知道，只要霍光还活着，就必须忍下去，不能做任何事情，这就是一个高明的政治家。
霍光终于死了，汉宣帝在风光地安葬了霍光之后，开始不动声色地行动了。
汉宣帝首先将霍光的女婿、儿子升迁了岗位，或者是得到了更高了职位荣誉，或者是调到了外地，远离了京城。这群笨蛋不论心中愿不愿意，都对皇帝的行动无可奈何。
调动岗位的结果是，霍氏手中不再有一兵一卒，宫中、京城、京城四周的军队全部安排了汉宣帝自己的人。
霍显还不知道大祸即将来到，她依旧很张狂地过着奢华的生活，霍家的人，不受规矩，任意出入皇宫。与霍家有仇的人，在汉宣帝跟前告状，汉宣帝总是说：“知道了”，却不再理会。
汉宣帝怀念许皇后，立许皇后所生的儿子为太子，霍光的女儿霍政君很生气，为了将自己亲生的儿子扶上太子宝座，霍皇后多次要毒死皇太子，太子每次吃饭，总有人先试吃，所以，每次都不能成功。
霍家的权力在减少，他们不停地抱怨，甚至想发动叛乱，杀死汉宣帝，他们根本没有想一想，军队已经全部到了他人手中，霍氏已经成了待宰的羔羊了。
汉宣帝终于动手了，霍氏满门被杀，霍皇后被废，霍氏帝国宣告结束。