漢宣帝顧念舊情，霍光雖是權臣，可在漢宣帝繼位及後來的政權穩固性方面做出了極大的貢獻。後來漢宣帝感念眾人的功績，挑出了其中十一個功勞最大的人，吩咐畫工把他們都畫在了麒麟閣上。

麒麟閣十一功臣，首功之臣只留姓氏沒留名

1．大司馬大將軍博陸侯霍氏，

2．衛將軍富平侯張安世，

3．車騎將軍龍額侯韓增，

4.後將軍營平侯趙充國，

5．丞相高平侯魏相，

6． 丞相博陽侯丙吉，

7．御史大夫建平侯杜延年，

8. 宗正陽城侯劉德，

9． 少府梁邱實，

10，. 太子太傅蕭望之，

11.典屬國蘇武。

每一個畫像底下寫上他的官爵和姓名。只有一個功臣最不好辦，那就是霍光。論他的功勞，誰都比不上；論國家的法令，他們家是滅了門的。大功臣在歷史上不能不給他一個最高的地位；大罪人又不應該傳揚後世。他的畫像底下，漢宣帝就叫單寫官爵和姓，可是不寫出名字。

首先漢宣帝不是一個刻薄寡恩的人，從漢宣帝對廣陵王劉胥的處置就可見一斑。公元前69年，劉延年因為謀反自殺，案子牽連到了劉胥。而漢宣帝則下令不要治劉胥的罪，還賜給他黃金5000斤和一些其它器物。公元前54年，劉胥被發現確實有詛咒漢宣帝一事，劉胥畏罪自殺。漢宣帝沒有趕盡殺絕，念在他是皇子，赦免了他幾個兒子的死罪，廢為庶人。如果不是漢宣帝性格比較寬厚，霍光家族謀反，漢宣帝藉此懲治霍光也無可厚非。

另外，雖然霍光家族謀反，霍光的妻子還害死了皇后，但是漢宣帝的帝位畢竟是霍光給的。而且霍光雖然專權，但是對漢室還是忠心的，沒有要取而代之的想法。工作也是兢兢業業，政事處理的也不錯。因此霍光病逝後，漢宣帝和上官太后一同到場治喪，將之與蕭何相比，以皇帝的級別安葬了霍光，並讓他賠葬在漢武帝的茂陵。

公元前51年，漢宣帝接受南匈奴歸降的時候，回想起了以前輔佐有功的大臣，命人畫了11名工程的像掛在麒麟閣，霍光列第一位。因為霍家已被滅族，同時也為了表示尊重，沒有寫出霍光全名，只尊稱為“大司馬、大將軍、博陸候，姓霍氏”。

漢宣帝劉詢對霍光的評價很高：“故大司馬大將軍博陸侯素為孝武皇帝30有一年。……功德茂盛鎮盛家之。……龔如蕭相國。……勤勞國家。”

不光是漢宣帝，漢代後世帝王對霍光也是褒獎有加。漢成帝的時候，曾經給霍光增加了守墓人100戶。漢平帝的時候，封霍光堂弟的曾孫霍陽為博陸侯，分給他1000戶，讓他奉祀霍光。