自從李愔離開長安之後，李成乾、李恪和李泰認爲是李愔失去了李世民的信任，被貶斥到了雲州。
他們的依據是什麼呢？
李愔能幹，這點他們都不否認，但是也許正是因爲他能幹，因此引起了李世民的忌憚。
張玄素給李成乾分析過，樑王李愔爲朝廷立下過很多大功，可是自從他從西域回來，皇上就對他沒有重用過，仍然讓他回去當一個不上臺面的研究所副所長。
侯君集當了吏部尚書，卻被免去了武警部隊司令的職務，應該是皇上解除侯君集兵權的手段。李孝恭擔任了皇家軍事學院的副院長，這也是一個可有可無的虛銜。
而樑王本身，一個堂堂的親王，到一個蠻荒之地（李成乾等人對於邊陲地區，都認爲是蠻荒之地），還沒有個明確的職務。這本身就說明了問題。
李恪和李泰也是這樣認爲的。
其實他們的看法也不是沒有道理——李世民還真是對李愔有些擔心。由於長孫皇后的關係，加上他對玄武門之變的忌諱，他確實是希望太子李成乾能夠順利即位。
李愔太能幹了，雖然他一直是輔佐太子的，可是太子的才智遠遠不是李愔的對手，即使他真心輔佐太子，他身邊的人，比如侯君集等人，難免不會產生其它的想法。
所以，李世民同意李愔去雲州，也有這方面的原因。
侯君集掌管吏部以後，霸道的作風使得朝堂的風氣一振。但是也有很多人看他不順眼，這次安排軍中的軍官接替地方空出的官職，他也在其中安插了大量的親信。
李世民是千古一帝，最大的本事就是看人識人，對於侯君集這樣性格外向的人來說，看得就更清楚了。
侯君集爲人霸道，好攬權。不過，李世民善於控制這樣的人，覺得他比起那些暗藏心機的人要好對付的得多。
侯君集大肆安插親信的做法，引起了李世民的注意，一度有拿他開刀的想法。
就在李愔離開長安後不久，朝廷中發生了一件事情，險些要了侯君集的命。
朝廷收繳武器的事情，牽連到了不少的朝廷官員，各部都空出了不少的位置。
兵部也是如此。
自從軍隊改制以後，兵部就成爲了一個沒有實權的部分，類似於現代的國防部，就是一個對外的門面。
兵部一個叫黃德安的7品科員，在兵部任職年限已到，如果不能升職，就要做專業安排了。此人一直是吏部的一個普通科員，俸祿很低，夫人又有病，經濟困難。
這次軍隊內部調整，有了不少的空缺，黃德安就借錢給房玄齡的兒子房遺直送了禮，想得到提升。
房遺直答應了黃德安的要求，他沒有告訴父親房玄齡，而是打着房玄齡的名義，找到了兵部右侍郎李中立。李中立也答應了房遺直，沒想到，最後事情沒有辦成。
黃德安的夫人原本有病，這次借了高利貸，事情還沒有辦成，一氣之下死了。黃德安急怒攻心，就通過他的一個遠房親戚，向侯君集告發了房遺直。
侯君集不願意管這件事，可是人命關天，他也不願意替房遺直背黑鍋，於是就告訴了魏徵。
魏徵眼裡不揉沙子，直接就告發了房遺直。事情鬧得沸沸揚揚的。房玄齡氣得大病一場，堅決要求辭去左僕射職務。
李世民聽說是侯君集把消息告訴魏徵的，心裡就犯開了嘀咕。他認爲是侯君集有意打擊房玄齡，好自己接替房玄齡的左僕射職務。
房玄齡也是這麼認爲的，因此，在李世民勸房玄齡收回辭呈的時候，他故意推薦了侯君集。
李世民決定試探侯君集一下。
太極殿，李世民的書房。
“皇上，您找臣來，有什麼吩咐？”侯君集說道。
李世民說道：“君集啊，你最近的表現很出衆，替我解決了很多麻煩。我很高興。”
侯君集說道：“皇上，那是臣分內的事情，替您分憂是臣的本分。”
李世民說道：“君集，你跟隨我多年，出生入死的，立下了汗馬功勞。你是我最信任的人之一。
現在，有件事情，我還需要你來分憂。”
侯君集說道：“皇上，請您吩咐，臣萬死不辭。”
李世民憂心地說道：“君集，最近玄齡的身體不好，加上房遺直的事情，他堅決要辭去左僕射的職務。我怎麼勸他也不同意。
左僕射的職務對於朝廷十分重要，不能空缺。我考慮再三，覺得你是我信任的人，能力也沒有問題，我決定由你來接替玄齡的職務。”
侯君集心中一動，他是真的想得到這個位置。不過，他想起了樑王李愔在他擔任吏部尚書以後，專門和他的談話。
李愔告訴侯君集，如果李世民有讓他進一步提升的提議，千萬不能夠答應，吏部尚書的位置最重要了，只要保住這個位置就是勝利。千萬不能奢望再進一步，那是取死之道。
侯君集當時答應了李愔，可是李愔不放心，他非要侯君集發誓才肯罷休。
李愔深知歷史走向，知道李世民對侯君集的忌憚以及對房玄齡的信任，因此才特意提醒侯君集。
侯君集對於女婿樑王絕對信任，樑王所做的每一件事情，都沒有讓他失望過。
侯君集當機立斷，馬上跪在地上，大聲說道：“皇上，萬萬不可。房大人是臣的上官，臣一直對他從心裡敬佩。臣願意替皇上勸說房大人，務必請他繼續擔任左僕射，大唐離不開房大人的。”
李世民很滿意侯君集的態度，但是他繼續試探道：“君集，你的心意，玄齡也會心領的。可是，他畢竟是年紀大了，身體也不行了。我也體諒他，讓他安度晚年。
而且，他也向我推薦了你。我看，你就接替了他吧。”
侯君集立刻猛力磕頭，把地板磕得嘡嘡響，說道：“皇上，無論如何也不行。房大人是朝廷的柱石，無論如何也要留住房大人。
臣就是每天去揹着房大人，也要請他來主持大局的。”
“哈哈哈”，李世民大笑道：“玄齡，你出來吧！”