卢祖尚能干的名声满朝皆知，重用是早晚的事。贞观二年（628年），交州都督因事获罪，唐太宗李世民要选人授任此职。这种地方都没人争着去，经过征询意见，大家都认为卢祖尚才兼文武，年富力强，可以胜任。唐太宗知道交州环境险恶，决定在内殿亲自召见慰勉。太宗对他说："交州离朝廷很远，前任都督不称职，公为我前去，不要因路途遥远而推辞。"皇帝如此信任自己，卢祖尚感动不已，叩头接受诏命，还大表忠心，表示要为大唐的伟大事业奋斗终生，死而后已。
从皇宫里出来回到家，激动的心情一平复，看着身边的娇妻美妾，卢祖尚马上后悔起来，自己好不容易拿命拼来荣华富贵，又要到蛮荒之地受苦，甚至可能丢掉性命，这个买卖可不划算。几经掂量思索，卢祖尚还是决定不去，理由很简单--有病。
皇帝当然知道他的心思，虽然不高兴，还是尽力安抚，派杜如晦等人晓谕旨意说："匹夫都不背弃诺言，公既然答应朕了，岂能反悔呢？三年后定召你回京，决不食言。"这话说到这里就到家了，三年后就回京，回来就提拔重用，这分明就是下基层挂职锻炼的套路啊，放现在，很多人想去边疆挂职还不一定去的了呢！
不料卢祖尚就是转不过这个弯来，哑巴吃秤砣铁了心坚决不去，推辞说："岭南有瘴气，而且臣不能饮酒（估计酒能解瘴气），去了就回不来了。"杜如晦只好如实回禀皇帝，太宗不由大怒，当众宣布："我用人而人不从命，以后怎样治理天下！斩首！"随即，卢祖尚就被斩于朝堂，当年仅有三十多岁。"君命不可违"，如果卢祖尚清楚这一点，别把这个职务当成累赘，而是当成机会，不仅丢不了性命，以他的年纪，以后回朝早晚会是个出将入相的名臣，实在是可惜啊，可惜！
