刘秀生了11个儿子，有4个是皇后郭氏所生，美人许氏生了1个，皇后阴氏生了5个。

刘秀于建武二年立郭氏为皇后，郭氏子刘疆为太子，阴氏为贵人。

建武十七年，废郭氏，立阴氏为皇后，十九年废郭氏子刘疆，立阴氏子刘庄为太子。

阴氏，就是南阳新野的阴丽华，是刘秀多年梦寐以求的美人。

更始元年六月，刘秀经昆阳之战成了大英雄，与阴丽华结了婚。

这年刘秀29岁，阴丽华19岁。

九月，刘秀要去洛阳任司隶校尉，暂把阴氏送回新野。

十月，刘秀又被派往河北。

次年春，大约二三月间，刘秀又在真定娶郭氏，而且&ldo;有宠&rdo;。

郭氏，名圣通，真定国槁县（今石家庄市东南）人，是当地著姓大富豪。

当时的刘秀既需要贵族势力的支持，又需要富豪的钱粮援助，故娶郭圣通为妻。

第二年（建武元年，公元25年）十月，刘秀住进了洛阳宫以后，就派人把阴氏接到洛阳。

次年二月策立郭氏为皇后，阴氏为贵人。

刘秀和阴氏在一起的时候最多，有时出征也带着她，汉明帝刘庄就是建武四年阴氏随刘秀出征彭宠到达元氏时生下的。

刘秀最喜爱的儿子是阴氏生的刘庄，经常带在身边。

这些不免引起郭氏的嫉妒和担心。

刘秀就指责郭氏&ldo;怀执怨怼，数违教令&rdo;，骂她就像鹰隼一般凶狠。

当刘秀的统治完全巩固了以后，建武十七年（公元41年）十月，终于把郭氏废掉，换上了他最喜爱的人阴丽华为后。

郭氏的被废给太子刘疆带来了巨大压力，他惶恐不安，一再要求辞掉太子，与别的弟兄平等，经常托朝臣和弟兄们向父亲转达心愿。

起初刘秀不许，拖了一年多，建武十九年（公元43年）六月，把他与已被封为东海王的刘庄换了位置。

刘秀对他有歉意，加大了他的封土，给了他不少超出诸王的待遇。

刘秀对贵戚的过分行为有所约束，一般能够理智对待。

司隶校尉鲍永、都事从官鲍恢抗直不避豪强，敢于弹劾贵戚的恣纵行为，曾弹劾刘秀叔父赵王刘良仗势呵斥京官为&ldo;大不敬&rdo;，刘秀借此告诫贵戚们应当约束自己，&ldo;以避二鲍&rdo;。

刘良临死时，刘秀去看他，问他有什么要说的话。

刘良说他没有别的话了，只有一件事，他的朋友怀县李子春犯了罪，县令赵熹要判他死刑，希望能保住他的命。

刘秀说：&ldo;官吏执行法律，我不能徇情枉法。

另说别的愿望吧。

&rdo;刘秀大姐湖阳公主的奴仆大白天行凶杀人，躲在公主家中，官吏不能捉捕。

洛阳县令董宣听说公主要出夏门（洛阳城北面最西头的门），杀人的那个奴仆驾车，就在夏门外万寿亭截住车子，把公主数落一通，当面杀了那个奴仆。

公主立即回宫告到刘秀那里，刘秀大怒，把董宣召来，要当面打死。

董宣说：&ldo;要求允许我说一句话再死。

&rdo;刘秀说：&ldo;你想说什么？&rdo;董宣说：&ldo;靠着陛下的圣明大德，汉朝才得到中兴。

现在放纵奴仆杀人，将怎么治理天下？我不用打，还是自己死吧。

&rdo;说着就把头撞到柱上，血流满面。

刘秀赶紧要小太监抱住他，让他给公主叩个头消消气。

董宣坚决不叩，刘秀就要人按着脖强叩，董宣就两手撑地，最终也不低头。

湖阳公主不满地说：&ldo;文叔当平民百姓时，经常藏匿逃犯，官吏不敢上门追捕。

如今当了天子就不能在一个县令身上施加一点威严？&rdo;刘秀笑着说：&ldo;这就是天子与平民百姓不同啊。