在他看来，执金吾就是一个很大的官了，那个时候他还没有想过当皇帝，因为目标太过远大了，刘秀见没见过阴丽华不知道，反正阴丽华就成了刘秀的动力，对于一个情窦初开的少年，阴丽华成了他心中女神。后来的昆阳大战让刘秀的名声大躁，当时他正在马不停蹄的南下攻城略地，此时一个噩耗传来，刘秀的哥哥刘縯被更始帝刘玄所杀。哥哥无故被杀，对刘秀来说，无疑是一个莫大的打击，但是刘秀能强忍悲伤，忍辱负重，没有给哥哥办丧事，还主动去向更始帝请罪。见刘秀如此谦恭，反而有些自愧，毕竟刘秀两兄弟立有大功，故刘秀不但未获罪，反而得封武信侯，刘玄这是想把刘秀牢牢的囚禁在宛城。
亲人的接连离去让他很痛苦，这时候他需要一个女人陪着他，他托阴识当媒人，在宛城迎娶了他思慕多年的阴丽华，那一年刘秀29岁，而阴丽华20岁，俩人终于走到了一起。之后刘秀被派去镇压河北叛乱，他暗中发展自己的力量，他因根基不稳，需要借助他人的力量，无奈之下，他娶了当时真定王的外甥女郭圣通。据说他当时他的心里很矛盾，因为一边是心爱的女人，另一边是可以帮他光复汉室的力量，他咬了咬牙，把郭圣通娶了回来。在这期间郭氏家族给予了他很大的支持，而郭圣通自从嫁给他后，一直跟着他东奔西跑，过得十分受苦的日子，甚至在此期间还给他生下了儿子。由于他俩的结合，郭氏家族尽心尽力的帮他，并给他带来了几十万大军，这也成为了他将来平定天下最重要的基础。
