与此同时，皇后郭圣通却因宠衰而更加怨愤不满。到建武十七年(四一年)刘秀终于废掉了郭皇后，而改立阴丽华为皇后。刘秀倒不是个绝情之人，虽然废掉了郭圣通的皇后称号，让她去做儿子中山王的太后，但是对郭家始终十分照顾，郭圣通的弟弟郭况官居大鸿胪，京师人都传称他家为"金穴"。郭圣通母亲去世时，刘秀也亲临送葬。这种情况直到汉明帝继位后没有什么变化。郭氏始终与阴氏一样受到皇帝的隆恩。这与阴皇后有一定关系。阴丽华这个人为人恭俭，没有什么嗜好，性情仁孝慈祥，对郭氏从无排斥。
汉光武帝刘秀死后，阴丽华之子刘庄继位，阴丽华被尊为皇太后。阴太后死于永平七年(六四年)，被合葬于刘秀的原陵之中。
