霍峻字仲邈，南郡枝江人。哥哥霍篤，在鄉里召集數百人的軍隊。霍篤死後，荊州牧劉表令霍峻代管他的部下。劉表死後，霍峻率領眾人投奔先主(劉備)，先主讓霍峻擔任中郎將。先主從葭萌南歸攻打劉璋，留下霍峻守衛葭萌城。張魯派遣將領楊帛誘惑霍峻，要求共同守城，霍峻說：“我的頭你可以得到，城池你不可能得到。”楊帛於是退去。後來劉璋的將領扶禁、向存等率領一萬多人從閬水進軍，攻圍霍峻，將近一年，不能攻下。霍峻城中計程車兵才幾百人，等到他們懈怠的間隙，選精銳計程車兵出擊，大敗了他們，立刻砍下了向存的首級。先主平定了蜀地，嘉獎霍峻的功勞，於是分割廣漢為梓潼郡，讓霍峻做梓潼太守、裨將軍。擔任官職三年，四十歲的時候死去，還葬成都。先主非常悼念痛惜，於是下詔諸葛亮說：“霍峻本來就是佳士，加上他對國家有大功，想要實行祭奠。”於是親自率領群僚聚集哀哭憑弔祭祀，然後在他的墓地上留宿，當時的人們認為他很榮耀。

兒子霍弋，字紹先，先主末年為太子舍人。後主登基，任命他做謁者。丞相諸葛亮北駐漢中，讓他做記室，讓他與自己的兒子諸葛喬一起周遊軍營各處。諸葛亮死後，擔任黃門侍郎。後主立太子劉璿，讓霍弋擔任中庶子，劉璿愛好騎馬射獵，出入沒有節制，霍弋引經據典，盡心盡力規勸進諫，非常合乎商討交流的禮儀。當時永昌郡的蠻夷之族依仗險要地勢不臣服，多次侵略為害，就讓霍弋兼任永昌太守，率領偏軍討伐他們。於是斬殺了他們的主帥，攻破他們的村寨，永昌郡界得到了安寧。調任監軍翊軍將軍，兼任建寧太守，仍舊統管南郡事務。景耀六年，晉升封號為安南將軍。這一年，蜀國合併到魏國。霍弋與巴東領軍襄陽羅憲各保全一方的百姓，全部歸附魏國，二人都沿襲從前的職務，被寵信禮遇。

《漢晉春秋》記載：霍弋聽說魏軍攻來，想要奔赴成都，後主認為防衛敵人的策略已定，沒有聽從。等到成都失守，霍弋穿著素服號哭，聚眾哀哭了三日。各位將領都勸他應該趕快投降，霍弋說：“如今道路阻隔堵塞，不清楚君主的安危，重大事故面前的去留，不能隨便。如果主上與魏國講和，被以禮相待，那麼保全境內投降，也不算晚。如果君主危急受辱，我將拼死抵抗魏軍，還說什麼早晚呢！”得到後主東遷(即投降)的訊息，才率領六郡將守上表說：“我聽說人的成功得益於三種人(生於父，教於師，食於君)，侍奉他們要始終如一，如果出現危難，就交出生命。如今我的國家敗亡君主依附於您，堅守下去會死無處所，因此交出自己，不敢有二心。”晉文王(即司馬昭)認為他很好，又任命他為南中都督，用原來的職務任命他。後來派遣他帶兵救援呂興，平定交阯、日南、九真三郡，分封功勞位列王候，晉升封號重賞他。