否为他将其找回来。
“旧剑”就是暗指许平君。群臣揣摩上意，开始一个个请立许平君为皇后。许平君于元平元年（公元前74年）被册立为皇后，不久，皇后怀孕。这就是“故剑情深”的典故。从此，这一浪漫典故开始流传，成为中国历史上一道浪漫的诏书，一个王子对贫女的许诺。
本始三年（公元前71年），许平君生下一女后，霍光的妻子霍显与御用女医淳于衍相勾结在滋补汤药中加入附子，让产后的许平君服用。许平君不久毒发，在痛苦中死去。汉宣帝非常悲痛，追封她为“恭哀皇后”，葬于杜陵南园（也称少陵）。一年后，霍光之女霍成君如愿以偿取代她为后。
此后，宣帝便一直韬光养晦，暗中积蓄实力，但是霍家的人却日渐嚣张。例如，霍光死后，他的埋葬奢侈豪华，随葬的陈设和服饰，如玉衣等，都是只有皇帝才能用的。而在霍光的葬礼上，霍氏一门的族人行为傲慢无礼，大事铺张，炫耀他们认为掌握得非常牢固的权力。不知不觉之间，宣帝仅存的对于霍光拥立自己为帝的感激之心，也在霍氏一门族人的嚣张跋扈之中消磨殆尽。
在霍光死后，皇帝开始培植自己的势力，最为典型的就是：将张安世任命为尚书令；并且任命当时最干练的魏相为相，而霍光死后，丞相的权力和尊严正在迅速地恢复；继而任命丙吉为御史大夫，又委以他的岳父许广汉以重任，逐渐把权力收归己手。
地节三年（公元前67年），霍光刚刚死去一年的时间，汉宣帝封许平君的父亲许广汉为平恩侯，同时册立与许平君在民间所生的刘奭为太子。霍显非常恼怒，甚至“恚怒不食，呕血”，并授意霍成君伺机毒杀刘奭。但因为太子的老师（一说保姆）先试菜验毒，所以霍成君几次下手均未成功。
这正应了“君子之泽，五世而斩”。霍光虽为大汉立下汗马功劳，但霍家人却不知惜福，日益骄横，不将任何人放在眼里。霍氏一门族人虽然身居高位，却不知为官之道，“朝请”时却“数称病私出”，“朝谒”也叫“苍头奴”代劳，最后连家奴都狗仗人势，竟因与人争道而入御史府踢大门，还动不动就扬言“县官（指汉宣帝）非我家将军（指霍光）不得至此”。
贵为天子的刘询已是“是可忍，孰不可忍”了。
首先，宣帝解除了霍光两女婿东宫、西宫卫尉的职务，剥夺了他们掌管的禁卫军权，这样，就将保卫自己的势力紧紧地攥在自己的手中。
其次，宣帝还将霍光的两个侄女婿调离了中郎将和骑都尉
…。。