一個四歲的孩子大多有自己幸福的童年，在父母親的懷抱裡享盡關愛、呵護，但是，小載湉入宮繼承帝位，就意味著失去了自己的童年、自己的父母。他現在是咸豐皇帝的兒子、兩宮皇太后的兒子。當然，咸豐帝已經死去十多年了，所以，他沒有爸爸。
可能有人會問：光緒帝不是有一位生身父親——醇親王奕譞嗎？
此時最尷尬的人莫過於醇親王奕譞了，自打兒子進宮，他整天把自己關在王府裡，閉門不出。他知道，他現在已經對慈禧至高無上的地位構成了極大的威脅，處於十分危險的境地。
自己的兒子做了皇帝，還會有什麼危險？其實，奕譞的危險恰恰在於此，雖然兒子已經過繼給了兩宮皇太后，但血緣關係是無法割斷的，奕譞畢竟是皇帝的生父，這一點誰都抹殺不了。慈禧太后之所以能夠以嬪妃的身份一步登天，母儀天下，主宰帝國的命運，不就是靠著自己是「皇帝之母」嗎？慈禧是同治皇帝的媽媽，現在是光緒皇帝的養母，可奕譞卻是實實在在的「皇帝生父」！在滿朝王公大臣的眼中，他不再是一個普通的王爺，而是一位能對帝國的前途發揮重大影響的「皇父」，這樣一來，他能不成為慈禧的「眼中釘」嗎？
醇親王奕譞
當然，慈禧不會懷疑自己擺平奕譞的能力，但她終有衰老的那一天。水有源，木有本，十幾年後光緒帝長大成人，成為乾綱獨斷的一國之君時，按照人之常情，他不會不認自己的生父。到那時，奕譞不就是一個實實在在的「太上皇」了嗎？慈禧這個養母算老幾！
而且，恐怕不用等到皇帝成年，隨著光緒帝一天天長大，就光緒皇帝會有越來越多心懷叵測的人投到奕譞的門下。作為皇帝生父，奕譞是名副其實的「原始股」，升值空間無限，那些做「長遠投資」的人肯定要打他的主意。為了「上市升值」的那一天早日到來，這些趨炎附勢的人肯定要興風作浪，大肆炒作，他很快就會被「炒」成大清國炙手可熱的人物。
慈禧肯定要處處打壓、防範奕譞的崛起，一旦慈禧認為他威脅了自己的地位，奕譞，甚至他兒子的命運都會逆轉。一想到這裡，奕譞不寒而慄，他深知自己這位嫂子兼大姨姐的心狠手辣、六親不認。
奕譞本來是個很謹慎的人，信奉「家大業大禍也大」的信條，平日裡謹小慎微，這下子突然成了矛盾的中心，他變得不知所措了。經過幾天的苦思冥想，他悟出了這樣一個道理，人家慈禧是「母以子貴」，而他奕譞必須「父以子賤」，否則就可能大禍臨頭。於是，就在慈禧正式垂簾聽政的十二月初八日，為了自己的命運和兒子的前途，奕譞做出了一個艱難的決定——急流勇退，遠離大清國的政治圈。
據《清史稿》記載，奕上了一道奏折，其中有這樣一段話：
臣侍從大行皇帝十有三年，昊天不吊，龍馭上賓，仰瞻遺容，五內崩裂，忽蒙懿旨下降，擇定嗣皇帝，倉猝昏迷，罔知所措，觸犯舊有肝疾，委頓成廢。惟有哀懇矜全，許乞骸骨，為天地容一虛糜爵位之人，為宣宗成皇帝留一庸鈍無才之子。
奕譞的這段話說得極其誠懇，意思是說由於同治皇帝的駕崩，再加上新君主的選擇出乎他的意料，他受到了巨大的刺激，導致原來的肝病復發，難以治癒，已經成了廢人，為此請求皇太后批准他「乞骸骨」——退休。奕譞甚至搬出了自己的父親——宣宗成皇帝，希望兩宮皇太后看在道光皇帝的分上允許他從此「虛糜爵位」，做一個光拿俸祿不幹事兒的閒廢之人。
光緒帝照片
接到奏折，兩宮皇太后跟恭親王奕商議，順水推舟，撤銷了奕譞擔任的一切職務，然後賞給「親王世襲罔替」的待遇。也就是說，奕譞的爵位不用像普通的王爵那樣每傳一代就降一等，他的子孫可以世世代代均為親王。這是一個巨大的榮譽，奕譞再次上折遜謝，這回兩宮皇太后沒有同意。
幼小的光緒帝從此沒有了爸爸，可他不是還有媽媽嗎？而且，他現在有四位母親：一位生母，兩位養母——慈安、慈禧太后，此外，他還有一位乳母。如此說來，他有四位女性的呵護，他該多幸福啊！其實不然。
光緒帝的生母是慈禧的親妹妹，以前經常進宮，姐妹倆走得很近。但此一時，彼一時，現在兒子過繼給了兩宮太后，作為生母再去探望確實很不合適，也很討人厭;而且，一旦進宮見到自己的兒子，除了板起臉來說幾句「官話」以外，不能跟兒子親熱，說起來也是件很痛苦的事兒。從此以後，她跟丈夫一樣，閉門不出，靠吃齋念佛打發時光。據說她成年放生燒香，為兒子的命運祈禱，夏天不進花園，說是怕踩死螞蟻。她一共生了五個孩子：一個女孩、四個男孩，但除了載湉長大成人之外，其餘的均夭折了。
生母不敢進宮，那麼兩位養母對小光緒如何呢？
慈安太后一生未曾生育，對養育小孩的工作心有餘而力不足;慈禧雖然育有一子，但那是二十年前的事兒了，現在的她操持帝國政務，一天到晚忙得昏天黑地，哪裡顧得上撫養小光緒。
當然，要說慈禧對光緒帝撒手不管也不是事實。這不，登基大典剛過了沒幾天，慈禧就下令將光緒的乳母攆走。確實，光緒四歲多了，該斷奶了，成天纏著奶媽怎麼能成長為一個合格的君主呢？
光緒帝自小在奶媽的懷抱中成長，感情非同尋常，進宮之後簡直就是相依為命，奶媽走了，光緒成天哭喊著要她，但沒有人理會他。