第四，安抚孤独疾苦的贫民。为了发展农业生产，每当春耕时，霍光就派人到各地去查看生产情况，政府把种子和粮食贷给缺粮少子的贫民。
秋天还下诏：“往年灾害多，今年蚕、麦伤，所振贷种、食勿收责，毋令民出令年田租。”“比岁不登，民匮于食，流庸未尽还，往时令民共出马，其止勿出。诸给中都官者，且减之。”
昭帝为了改革吏治，选拔任用有才德的人，皇帝下令：“三辅、太常举贤良各二人，郡国文学高第各一人。赐中二千石以下至吏、民爵，各有差。”
霍光自辅政开始，就一直很在意处理好自己和君主的关系。否则，不但会败坏自己的声名，为政敌所乘，更会贻害天下。
霍光当政之时，其最大的政敌，就是左将军上官桀和燕王刘旦。本来，按照上官桀和燕王的计划，如果霍光在当政之时，有什么不轨的行为或者过激的举动，他们就可以名正言顺地“清君侧”，然后废帝自立。可惜，这霍光最大的长处，就是为人谨慎，他们想尽了办法，却依然抓不住霍光的任何把柄。
上官桀觉得，如此下去也终非长久之计，要成大事，就要不择手段，利用一切可以利用的资源，于是，他们便将自己的目光转向了昭帝之姊盍长公主。此人年长于昭帝，自幼便得到武帝的喜爱和恩宠。而公主此人虽然智谋上不比上官桀等老奸巨猾之辈，却也是素有野心。于是，上官桀和燕王决意，先与公主打好关系，然后一步步逼近皇朝的至高权力。当然，直接和公主接洽，太惹眼了，很容易使霍光有所防范，而且也难保公主会理睬他们，所以上官桀首先去巴结公主之近亲丁外人，并极力为丁外人求官晋爵。公主得知此事大为高兴，于是日益亲厚上官桀，上官桀遂与丁外人、公主等结成死党。在第一步完成之后，通过与公主的关系，上官桀遂紧锣密鼓的布置其孙女入宫的事情，最终其孙女被封为婕妤。明眼人一下就能够看出，上官桀此举，是意欲通过公主和孙女，来取代霍光与昭帝的地位。
太子刘据死后，燕王刘旦本以为，天子之位定然非自己莫属，岂料会半路杀出个程咬金，让昭帝抢了先机，遂心怀不满。无独有偶，御史大夫桑弘羊在武帝时理财有功，不甘居于霍光之下，遂想推翻昭帝，赶霍光下台，由自己和上官桀主持国家大事。如今上官桀已经找到了长公主这样一棵大树作为靠山，撇开了自己，桑弘羊遂与燕王刘旦勾结起来。这就形成以燕王刘旦和长公主为首的两股政治势力。
而眼下霍光手握天子，实力上较他们任何一
…。。