太子朱标虽对楚泽颇为赞赏，但在一些谗言面前，也难免产生疑虑。他开始想，这个楚泽，是否真有夺嫡篡位之心？自己是否应该防范于未然？
而在东宫，也有人开始蠢蠢欲动。太子少师高永，便是其中之一。
高永出身汉人望族，野心勃勃，早就对朱元璋“重用楚泽”的做法不以为然。如今楚泽威名日隆，他便起了离间之心。
这天，高永见太子心事重重，便装作关切道：“殿下，近来可有心事？臣知殿下一向器重楚都督，但外间传言，此人恐怕居心叵测啊。”
太子闻言，蹙眉问道：“哦？高大人这话何意？”
“殿下，你想啊，先皇尚在之时，便对楚泽赞赏备至，封官晋爵，可谓恩宠非常。如今楚泽又修长城，挟兵自重，在朝中树党营私，颇有跋扈之势。恐怕他早已不安于现状，生了异心也未可知啊。”高永一脸深沉。
太子闻言，若有所思。他暗忖，高永虽有私心，但这番话却也并非空穴来风。楚泽如今权势熏天，难保没有非分之想。看来，自己确实应该多加提防了。
想到这，太子心中一沉，面露难色。而高永却暗自得意，为离间计的初步得逞而窃喜不已。
京城的流言，终于传到了楚泽耳中。他闻讯之下，也不禁心情复杂。
他知道，自己虽忠心为国，却难免招致小人忌惮。这般朝堂倾轧，实在令人不齿。
赵四见楚泽愁容满面，忙上前宽慰：“大人，那都是些酸言妒语，您何必放在心上。凭您的功绩和圣上的信任，任凭那些小人如何造谣生事，也休想动摇您的根基！”
楚泽闻言，神色稍霁。他拍了拍赵四的肩，感慨道：“赵四，你说得对。我楚泽行得正坐得直，问心无愧，又何惧流言飞语？况且，我等肩负兴国安邦的重任，岂能被小人挑拨离间所扰？来，我们还是尽快回京，向皇上禀报长城的修筑情况吧。”