后来卫少儿怀了霍仲孺的孩子，霍仲孺则趁着公务结束的机会跑路，不承认和卫少儿之间的事，留下了卫少儿独自承担责任。回家之后的霍仲孺，开始了自己的逍遥日子，娶妻生子，与卫少儿断绝联系，不同音信，直到卫少儿生下孩子他也不曾过问。
卫少儿有一个妹妹，名叫卫子夫，后来被汉武帝看中而入了后宫，受到了汉武帝的宠幸。卫子夫怀孕之后，陈皇后无子嫉妒，陈母馆陶公主就派人逮捕她的弟弟卫青，并想杀掉卫青，幸好卫青的朋友公孙敖将他救了下来。
汉武帝知道这件事情之后，封卫青为侍中、建章监，卫子夫为夫人，自此卫家得了富贵，这一点是令霍仲孺怎么都想不到的。
尽管霍仲孺绝情，但卫少儿念及和霍仲孺当日的情分，还是让自己的儿子姓霍，取名去病。霍去病少年英雄，跟随舅舅征战沙场，立下汗马功劳，在十七岁的时候就凭借战功被汉武帝封为冠军侯，十九岁时被封为骠骑将军，二十二岁封狼居胥山，令匈奴闻之丧胆。
霍去病以私生子的身份降临人世，霍仲孺对此从来不曾过问，没有尽过做父亲的责任，卫少儿也从未向儿子说过父亲的事情。长大之后的霍去病，在得知父亲的事情之后，并没有因此而记恨父亲，反倒是苦苦追寻。
在霍去病一次出征前，顺道前去拜问了霍仲孺，并对其恭恭敬敬，施以父子之礼，还给霍仲孺置了田宅奴婢，霍仲孺羞愧不敢当。霍去病凯旋还朝的时候，又将还在父亲身边的弟弟霍光带到了京城培养，霍光这才从乡下来到了京城，开始了自己的仕途。在霍去病死后，霍光受到了汉武帝的信任，成为了汉朝时期的权臣。
霍仲孺抛弃怀孕的卫少儿，对儿子的出生也是不管不问，自己回家另娶妻生子，真的是一个彻头彻尾的渣男。胆小怯懦，不负责任，他这样的人在历史中本不会留下半点痕迹，但正因为了他的儿子，这才历史留名，真的算得上是父凭子贵了。
