二十多年的戎马生涯，让这位李家宗亲老将，建立了不朽功勋，同时也在连年大战当中，留下了很多旧疾。
所以，从贞观二十一年开始，李道宗以自己身体不适为由，请求不再领军，转而去做一个闲职。李道宗的请求，得到李世民的应允。所以从这一年开始，李道宗转为太常卿，不再涉足军队之事。
对于李道宗彻底放开军权的原因，史学界一直有所争论。当时的李道宗，其实年龄并不算很大，只能算是中年人。之所以放弃军权，可能存在多重原因。首先是鸟尽弓藏的道理。在灭掉薛延陀之后，整个唐朝，不管是内部还是周围，已经再没了敌人。没了敌人，自然也就没了名将生存的土壤。这个时候李道宗放弃军权，算是很明智的了。
其次，贞观二十年的李世民，虽然同样年龄不算特别大，但已经开始变得有些昏聩了。从太子李承乾谋反案发生之后，这位中国历史上最为传奇的帝王，便开始走下坡路了。此时的李道宗，极有可能是觉得李世民已经有些昏聩，害怕自己继续掌权引火上身，所以才不得不放弃军权。
