從皇權的特性而言

1. 皇權和儲權是天然的對立陣營，太子權力過大無疑會嚴重威脅皇帝的權力。就像你問題中提到的“幕僚在側”，一旦太子身邊聚集了大量幕僚，這些幕僚中難免有人說東道西，對皇權產生威脅，而且極易造成朝廷中的一股朋黨勢力也就是太子黨。很多大臣也會本著功利的目的前來結交太子。很容易對英明神勇的老爹產生心理壓力。

在帝王之家，再加上一個強悍的父親，這個強悍不僅僅指對皇權的絕對控制，更是對眾人的威懾，作為他的儲君人選，要求自然不會低，但同時戒備心也是極重的，你如果表現的太過了，反而會引發嫌隙，為了防止儲君的權利太過，自然會培植各種勢力來制約甚至打壓，說好聽點是為了鍛鍊太子，說難聽點就是現在必須我說了算。

2.有一個偉大的父親，作為儲君從小也揹著很大的壓力。身邊的人肯定天天在那裡說你爹那時候怎麼怎麼樣，你爹你這麼大的時候已經怎麼怎麼樣了。長大以後更難做。不努力進取，父親會覺得你一點也不像我，不努力。努力進取，父親會覺得你爹還活著，你努力是要我下去？！總之三天兩頭被老爹找機會修理一頓。天天生活在這種高壓下，好不容易熬到中年，自己也還算優秀(畢竟基因在那裡)。然後發現老爹怎麼還不死啊(雄才大略的皇帝一般都多福長壽)。旁邊的什麼老師朋友開始天天攛掇自己像李世民同學學習如何坑爹。自己在那裡一邊覺著爹太牛逼坑不過，一邊還得提防著萬一爹覺得我要造反怎麼辦。還得提防老爹身邊的人和自己的弟弟們陷害自己 。有的太子提心吊膽的熬著熬著把自己熬死了(朱標同志)，有的太子熬著熬著受不了造反(李承乾同志)，有熬著熬著老爹覺得不順眼打發走再沒回來(扶蘇同志)，有熬著熬著被老爹旁邊的人陷害然後被逼造反最後被宰(劉據同志)，最坑爹的是老爹喜歡上別的女人然後廢了自己的(劉疆同志別哭哈)。這麼多壓力之下，他們的第一位太子能即位的真是太不容易了。劉盈同志快感謝上天給了自己一個好母親吧。

2.太子地位優越，萬綠捧出一抹紅，難免有時自我膨脹 ，再加上身邊總有很多幕僚不乏溜鬚拍馬的，導致對權力的慾望過分膨脹，做事難免就會缺乏沉穩甚至做出些愚蠢至極的事。這一出錯那肯定就要收拾你了。

3.儲君被優待是極其正常的事，但在此同時也就成了靶心，一旦有其他皇子暗裡競爭，太子的一切行為就會被競爭對手放大。而且一個不用解釋的道理就是，越是開國明君，他的兒子中不止一個優秀的機率很大。總之，太子身邊就是個巨大的暴風眼。

當然也可以從心理學等角度分析，但是皇權和儲君權力的天然對抗應該是問題的關鍵。所以雍正皇帝想了一個高招，就是秘密立儲，秘密立儲下，所有皇子都不能開府，沒有幕僚輔佐，儲君權被取消。此外，皇子本身只能戰戰兢兢，因為你不知道自己的位置何在，只好拼命努力學習，和其他的兄弟們競爭了，自然是一心苦讀聖賢書，無力貪杯交際酒了。對於大臣而言，因為拿不準誰會成為太子，也就不會去巴結黨的下一任領導人了。

當然秘密立儲也有缺陷，

1萬一在朝廷權威衰落之時，皇帝暴死，皇帝的真實意圖可能會被其他政治勢力篡改。

2擁有繼承權的皇子在上位前缺乏處理政務的能力，也缺乏一定的權威，總之秘密立儲適合在王朝鼎盛時期用，在衰落時期就具有風險。當然了，由於清朝從咸豐後都沒兒子，這一制度也就沒體現出什麼問題。