因為陰麗華的執意辭讓，光武帝立了郭貴人為皇后，但是心中對陰麗華的情意卻愈加深厚了。為了彌補自己心中對陰麗華的虧欠，他便想將陰麗華的弟弟陰興封為列侯。陰興當年跟隨劉秀東征西討，鞍前馬後，也是立下汗馬功勞的開國功臣。所以，陰興被封侯也不僅僅是靠姐姐的裙帶關係。但是，陰家家風甚嚴，姐弟倆對於功名都很淡薄，而且為人謙恭。面對皇帝給他的列侯印綬，陰興固辭不受，光武帝無奈，只能隨他去了，從此之後對他更加敬重和信任了。
在冊封郭皇后的同一年，宮中突然傳來了一條讖文：「赤九之後，癭揚為主。」據史書記載，這是郭皇后的叔叔真定王劉揚為自己造勢所編。漢為火德，所以稱赤，自漢高祖至今，已有九代，而劉揚的脖子上恰巧長有癭瘤，這句話的意思無疑是說，只有劉揚才是真命天子。劉秀當年與劉揚的外甥女郭氏聯姻，本來就是出於鞏固戰略同盟的政治目的，而現在劉揚的所作所為顯然是有謀逆之心。劉秀便決定偷偷查明真相，早點除掉隱患。
劉秀先是派人徵召劉揚，但劉揚此時擁兵自重，竟然閉城不見。這一試探之下，光武帝便知道劉揚是決意要謀反了，於是，他便派將軍耿純以行赦幽冀、勞慰王侯的名義前往真定，伺機除掉劉揚。劉揚兄弟自恃強兵在手，絲毫不把耿純一行人放在眼裡。等他來到驛站之後，耿純來了招關門打狗，輕而易舉地就把劉揚滅了。
劉揚一死，這樁政治聯姻就失去了本來的意義，加上郭皇后為人驕矜自傲，劉秀便想廢掉她，另立陰麗華為後。但是，善良的陰麗華總是以大義勸諫光武帝，說郭皇后並無失德之事，自己也無心爭奪後位，就不要輕易廢後了。面對如此謙讓溫順的妻子，劉秀更加堅信自己當年的判斷「娶妻當得陰麗華」，對她越來越信賴和敬愛。所以陰麗華雖然默默地做了十六年的貴人，卻一直很受光武帝的寵愛，為光武帝生下了五個兒子。