疏广对疏受说，古人云，懂得满足才不会受到屈辱，懂得适可而止就不会遇到危险。功成身退才是天道。现在我和你官至二千石，应该知足了。现在不离开，将来不然后悔。我们叔侄应该回到家乡，享受天伦之乐，不要再恋栈权位名声。
在如日中天的时候能够急流勇退，古往今来，有几人能做到？疏广叔侄在未来一片大好的情形下，看透官场，看透人生，换一个活法，真心值得敬佩。
疏受完全赞同疏广的意见，两人上书告老还乡，宣帝只准休假三个月。但是疏广疏受叔侄两个休完三个月假后，坚持辞官回乡。宣帝不得已批准，并赐黄金20斤。太子刘奭非常感激两位老师的教导之恩，又赠送黄金50斤。
回到家乡兰陵后，疏广疏受两人连日大摆筵席，招待乡亲父老，并向需要的人赠送钱财，毫不吝惜。这样的日子过了一年多，疏广的子孙见再这样下去，家产早晚就会花光，但是又不敢直接对疏广说，便委托族中老人劝疏广节省。
