等到两年后两人相见之时，阴丽华才发现早已物是人非，丈夫身边早已有了其他女子的陪伴而且有了子嗣。光武帝刘秀为了弥补阴丽华，想要立其为后，但阴丽华却回绝这项提议。她曾对光武帝说道：“我虽为你的原配夫人，但在你征战四方之时陪伴在你身边的却是郭圣通贵人，而且她还为你生下了长子，她的功劳比我大太多了，应该立其为皇后才对。”综合当下的时局以及阴丽华的推辞，无奈之下，刘秀立郭圣通为后，其长子刘疆为太子。阴丽华也被人称颂有容人的雅量，性格温婉和善。

第二个原因便是阴丽华绝不干涉朝廷政事，安居其后宫之中。阴丽华在后宫之中一直是贵人的位分，并没有什么特殊的待遇。光武帝一直偏爱于她，曾带其一起从军，他们的儿子刘阳便是在行军路上所生的。在建德十七年，光武帝废黜原皇后，改立阴丽华为后。阴丽华一直伴随在光武帝的身边，不离不弃，两人一起见证了东汉王朝的崛起。