皇后郭圣通因为失宠，不停地抱怨，使刘秀怒不可遏。公元41年冬季，刘秀罢黜郭圣通，改封阴丽华为皇后。下诏说：“这是一件非常事变，不是国家之福，不准庆祝祝福。＂

郅向刘秀进言说：“我听说，即使是当父亲的，也不能干顶儿子与儿娘间的私情，何况做臣属的，怎么能规劝君王呢？所以，我不敢做任何进言。不过唯请陛下适当处理，莫使天下人议论纷纷！＂刘秀说：“郅最能推己及人，应该知道我绝对不会失去分寸，无视天下人的反应。”刘秀封郭圣通所生的儿子刘辅当中山王，封郭圣通中山太后。郭圣通虽然被废，但刘秀后来又任命她的兄弟郭况为大鸿胪，并常常到郭况家，赏赐金银财宝，不计其数。

郭况家黄金有数亿斤之多仅家童就有400余人。京师百姓称郭况家是“金矿”。皇后郭圣通既被罢黜，郭圣通生的皇太子刘彊，心怀恐惧，不能自安。郵恽建议说：“长久地坐在不稳定的座位上，使父亲为难，有违孝道。一味拖延，更可能激起危险的反应，不如辞去太子，退避到亲王的地位，专心奉养娘亲。”刘彊接受劝告。拜托父亲左右亲信和其他亲王，向刘秀表示他的诚意愿退居封国落属。

刘秀既罢黜了他的母亲，不忍心再罢她的儿子，这样犹豫了数年。面现任皇后阴丽华，也有了自己的亲生之子，刘秀不能不做决定。公元43年，刘秀下诏：“《春秋公羊传》有云：立嫡以长不以贤，立子以贵不以长。母贵则子贵，子以母贵，母以子费。＇也就是说，选择继承人时，以出身高费为标准。东海王刘阳，皇后（阴丽华）所生，应承宝座。皇太子刘强，坚决谦让，愿退居藩属。父子之情，不愿太勉强他。特改封刘量当东海王，封刘阳当皇太子，刘阳改名刘庄。”

刘阳自幼就聪明容智。前些年，刘秀要求地方政府呈报农田面积，可是很多地方上报的数据都不确实。而且户数人数，每年互有增减。他于是下令各州、各都、严格测量、，重新确定。而各州刺史（州长）、各哪太守（郡长），遊抓住这个机会，大肆发财，借测量之名把农民聚集在田亩中央，達家宅农含，都寸寸追究。天下百姓骚动，年走道路，啼哭呼，诉苦无门。

但官府对土豪劣却特别庇护。当时，各郡都有专设信差，到首都洛阳呈递奏章。就在陈留郡的奏章中，刘秀发现郡政府承办官员不小心夹在里面的一张便条，上面写：“颗川郡、弘农郡可问，河南郡、南阳郡不可问。”刘秀召见陈留郡信差，问他什么意思，信差不肯承认有什么意思，只说：“那字条是在洛阳长寿街上捡来的，误夹到当中的。”

刘秀勃然大怒。当时皇子刘阳才12岁，他在屏风后面插嘴说：“那是郡政府对信差的指令，教他探听其他郡县测量的结果。”＂刘秀说：“果是如此，为什么说河南郡、南阳郡不可问？”刘阳说“河南郡，首都所在，多的是皇帝亲近的臣僚；南阳郡，是皇帝的老家，多的是皇亲国成。无论房舍农田，都超过规定，不足为凭。”刘秀命侍从通问陈留郡信差，陈留郡信差承认，果然不出刘阳判断。刘秀对这个儿子大为欣赏。

刘秀册封刘阳为皇太子后，又任命刘阳的舅父阴识代理执金吾，阴兴为卫尉，辅佐刘阳阴识性情忠厚，在宫中虽然正直进言，可是跟门客在一起时，从不谈及国家大事。刘秀对他十分看重，常拿他作为榜样，告诚左右及皇亲国戚。阴兴虽然礼贤下士，门庭热闹，但是门客中从没有英雄豪侠。10年前强盗杀死了阴丽华的母亲，邓夫人和弟弟阴诉，刘秀十分悲伤，封阴丽华的另一个弟弟阴就当宣思侯，还打算封阴兴侯爵。

阴兴坚决拒绝说：“我没有冲陷阵的功劳，而一家之中，已有好几个人封爵赐土，使天下抱怨，我不愿看到这种事情。”刘秀佩服他的决定，不再勉强。后来，妹妹阴丽华问其中的缘故，阴兴说：“皇亲国成最大的危险，是不知道谦让退避。女儿要配王侯，男儿则一直打公主的主意，使我不安。富贵有它的极限，人应该知道满足。浮夸之徒，使人反感！＂

阴丽华深切领悟，自我克制，从不替亲戚要求官卧。阴兴跟同都人张宗、上谷郡人鲜于哀，感情素来恶劣，但知道二人的长处，仍称赞他们的长处，推荐他们当官。老友张汜、杜禽与阴兴，一向感情至好，但阴兴知道他们只会说大话，并没有才干，所以只在金钱上帮助他们，却不介绍他们到政府任职。世人称道阴兴忠心，不以私人的好恶，伤害公正。

后来，刘秀患上了一种头痛目昡的病疾，久治不愈，而且病情越发沉重。此时阴兴正担任侍中。在南宫云台殿卧室内，刘秀便把身后之事，托付给这位内兄。可是后来刘秀病情好转，于是召见阴兴，要他接任吴汉留下来的大司马职位（吴汉于这一年春去世）。阴兴叩头坚辞，态度坚决，甚至流泪，说：我并不爱惜自己性命，只是怕伤害了您的完美形象，所以不愿意马马虎虎充数。＂阴兴发自内心的减恳，使刘秀左右的侍从人员都被感动，刘秀只好尊重他的意见。陈留郡人董宣当洛阳今时，刘秀的姐姐湖阳公主刘黄的家奴仗着权势，光天化日之下致人于死躲藏在刘黄家，官府无法逮捕。

后来，刘黄有一次出门，用那个家奴陪坐乘车，董宣得知后，在夏门外万寿亭等候，拦住公主的车队，要求逮捕家奴。刘黄不许，董宣用佩刀画地，大声数落刘黄所犯的错误，就在刘黄面前，喝令家奴下车，将其当场诛杀。