因託孤中沒有站好隊，晚年被武則天從吏部尚書一直貶到今越南清化任刺史。晚年的褚遂良一直奔走在各地赴任中，直到死都沒有在回到中原。

褚遂良是唐代著名書法家，他為人正直，學識淵博，頗有治世才能，深得唐太宗賞識。

李治繼帝位後，欲立武則天為皇后，褚遂良堅決反對，被貶為潭州都督，也因此得罪了武則天本人。

武則天掌權後，褚遂良被貶為桂州（今桂林）都督，再貶愛州（今越南清化）刺史，罪名為謀反。

褚遂良身陷絕境，寫信給高宗李治，向他求情訴說自己曾長期為高祖與太宗效勞，並堅決地支援高宗繼位等，無果。顯慶四年（659年）禇遂良客死異鄉，時年63歲。

褚遂良死後，武則天並未罷休，一方面將他的官爵盡削，另一方面將他的子孫後代流放到他客死之地。

褚遂良，字登善，是唐朝時期的大臣，同時他又是著名的書法家，他很有才學，精通文史，同時褚遂良又精通於書法，褚遂良與歐陽詢、虞世南、薛稷合稱為初唐四大家。

那大書法家褚遂良的晚年結局如何呢？

褚遂良出身名門，他的父親褚亮在薛舉稱帝時，被任命為官，同時褚遂良也在薛舉那裡為官，薛舉死後，他的兒子薛仁杲繼位。公元618年，李世民攻打薛仁杲，薛仁杲在不能取勝的情況下，就投降了李唐，而這時薛仁杲的手下也被收編到李世民那裡，其中就有褚遂良。

褚遂良之後被李世民所發現，李世民對褚遂良之才也有所喜愛，之後褚遂良在李世民登基前後一直輔佐於李世民，深受李世民的器重。

公元643年，太子李承乾因和侯君集等人勾結謀反被廢，太子位出現空缺，這時褚遂良就和長孫無忌一起建議李世民立晉王李治為太子，最終李世民立李治為太子，在公元648年的時候，褚遂良被任命為中書令。

公元649年，李世民病重，就把太子李治託付於長孫無忌和褚遂良，因此褚遂良也是託孤大臣之一。李治登基為帝后，是為唐高宗，先後封褚遂良為河南縣公、河南郡公，吏部尚書、光祿大夫、尚書右僕射，當時的褚遂良可謂是位高權重。

然而後來唐高宗李治寵愛武則天，在公元655年，並且要立武則天為皇后，卻遭到長孫無忌、褚遂良的堅決反對，並且褚遂良的行為和言辭也讓唐高宗李治很生氣。

唐高宗因為惱怒褚遂良，所以就命兵士把他拉了出去，而武則天則深恨褚遂良。

而唐高宗又問李績立武則天為後的事，李績不想得罪皇帝和武則天，又知道皇帝立武則天的決心，所以就回答唐高宗說，這是皇帝的家事，不該問外人。

因為李績的這句話，更加堅定了唐高宗立武則天為後的決心，最終李治封武則天為皇后，因為褚遂良曾極力的反對武則天為後，因此得罪了武則天，受到武則天的怨恨。

武則天被封為皇后之後，褚遂良就被貶到潭州為官。之後褚遂良又被調到桂林（古時桂州）為官。同時武則天又讓許敬宗等人誣陷褚遂良反叛。之後又貶褚遂良於大唐本土之外的愛州。

褚遂良開始貶到潭州離長安雖遠，但還是沒有桂林（古時稱桂州）離唐都長安遠，而桂林（古時名為桂州）雖遠，卻沒有大唐本土之外的愛州遠，因此晚年的褚遂良是處於流放的狀態。

在公元659年時，當時褚遂良六十三歲，在他被貶之地去世。直到褚遂良去世後的四十六年，就是公元705年，褚遂良才被平反，後來得以配享高宗廟中，這也算是對褚遂良的安慰吧。

褚遂良（596年-659年），字登善，杭州錢塘（今浙江杭州市）人，祖籍陽翟（今河南禹州），唐朝政治家、書法家。褚遂良博學多才，精通文史。任吏部尚書，監修國史，旋為尚書右僕射，知政事。因堅決反對立武則天為後，貶為潭州（今長沙）都督。武后掌權後，遷桂州（今桂林）都督，再貶愛州（今越南清化）刺史。顯慶三年（658年），卒於官，享年63歲。天寶六年（747年），配享高宗廟庭。褚遂良工於書法，初學虞世南，後取法王羲之，與歐陽詢、虞世南、薛稷並稱“初唐四大家”，傳世墨跡有《孟法師碑》《雁塔聖教序》等。

褚遂良是李世民十八學士之一儲亮的兒子，自小就博學多才，並擅長書法。他和長孫無忌同為唐太宗李世民的託孤重臣，共同輔佐高宗李治，因為高宗對權力的渴望，所以這就埋下了高宗同他和長孫無忌的心結。武則天其實是在高宗早年同輔政大臣的鬥爭中發現的政治奇才，高宗以廢王立武為契機，展開了對輔政大臣的打擊，並利用武則天的上躥下跳，改造內廷以及外朝，形成堅強的政治同盟。這也就是為什麼高宗會完全不念舊情，很輕易的同意武則天處死王皇后和蕭淑妃，以鞏固得來不易的政治優勢。

褚遂良在第一次廢后的殿前商議時，就完全不顧高宗的意願，以死相逼，堅決反對廢王立武，急得武昭儀在簾子後面厲聲高呼“何不撲殺此僚！” 但是此時另外一位宰相的李績卻說“此乃皇上家事”，事實上支援了廢王立武。

武則天當上皇后以後，在高宗的授意下，迅速集結許敬宗，李義甫等朝中反對實力對長孫無忌和褚遂良進行了打擊和構陷。長孫無忌多次利用冤案打擊李唐宗室為親外甥李治鋪路，但是到了武則天這裡，卻因為謀反的冤案，啷噹下獄，並很快被逼自殺。褚遂良作為高宗輔政大臣之一，自然難逃打擊。很快遍被貶潭州，即長沙，後改貶桂州，即桂林，後又貶到愛州，即現今越南北部。在輾轉流放的途中，一代書法大家褚遂良終於在驚恐中死去。