东方朔说："我是不得已而为之。我身高九尺，侏儒身高三尺，但我和他们的俸禄却是一样的。总不能撑死他们，而饿死小臣吧!皇上如果不用我，不如放我回家，免得在京城白白浪费粮食。"汉武帝被东方朔的幽默逗笑了，很快便安排他在御前行走。因为大臣们看不惯东方朔玩世不恭的态度，所以常常弹劾东方朔。而东方朔被弹劾最多的，则是他娶妻时定的三个规矩。
东方朔娶妻的三个规矩，分别是：一、只娶京城长安的女子。二、只娶年轻漂亮的女子。三、每个女子只能在他身边待一年，一年后打发出府。因为年年做新郎，所以汉朝大臣们都痛斥东方朔道德败坏，是个无耻之徒。而汉武帝却笑笑说："他是个聪明人"。为何汉武帝这么说呢?
因为东方朔是个谋士，深知伴君如伴虎的道理。而他又时常说一些"大逆不道"的话，说不准哪天就人头落地了。为了不连累家人，他便每年娶一个妻子。而他所娶的女子通常都是贫苦人家的姑娘，他将皇帝给的赏赐都当作"分手费"给了前妻，所以到头来手上并无余财。即使哪天去见了阎王，他也不留遗憾。最关键的是，他知道皇帝忌惮什么，所以便用一些小毛病来削减皇帝对他的戒心。因此汉武帝称他是个聪明人。
