乾隆皇帝是中國歷史上很有名氣的皇帝，他不僅文武全才，而且喜歡遊歷山川美色，據說曾多次下江南。民間認為乾隆帝到江南體察民情是假，基本上是為了尋求漂亮的美眉。有人說乾隆皇帝年少時就是一個多情的王爺，曾經和皇帝的不少姬妾有過緋聞。而且曾經因為自己心愛的女人，逼死過自己的孝賢皇后。
這裡有這樣一則資料：乾隆漁色甚至。傅恆之妻，孝賢皇后嫂也。以淑房戚，得出入宮掖。弘歷乘間逼幸之，傅恆妻不敢拒，遂有娠。未幾，生一男，即福康安也。傅恆凡四子，其三子皆尚主為額駙，寵眷反不及福康安。而福康安獨不尚主，其故可想見矣。大意是乾隆爺很喜歡漂亮美女，當時傅恆的妻子是皇后的嫂子，因為這個緣故，才得以出入宮廷，因為相貌不俗，極其美艷，讓乾隆爺龍心大悅。於是尋找間隙前去和她搭訕。不久便有了私情，後來生下一個男孩，取名叫福康安。傅恆的其他兒子都和公主接親，唯有福康安不能享受這個待遇，不過在當時福康安的待遇卻超過任何人。
蔡東藩的清史演義裡也說：傅夫人連飲了幾杯，酡顏半暈，星眼微餳，一片春意。乾隆帝見她已醉，命宮女扶至別宮暫寢，復令大家閒散一番，乾隆帝也出宮而去。隔了一小時，大家重複入席，飲酒數巡，時已未刻，皇后令宮女去視傅夫人，宮女去了，好一歇，未見回報。等到大家用過了膳，宮女始含笑而來，報稱傅娘娘臥室緊閉，不便入內。皇后道：「皇上呢？」宮女道：「皇上麼？」說了兩聲皇上，停住後文。皇后已微覺一半，不問下去。大家散了宴，少坐片刻，日影西沈，宮中統已上燈，便各謝宴退出。是晚只傅夫人不勝酒力，留住宮中。次晨，乾隆帝仍出視朝，傅夫人方至坤寧宮告辭，皇后對她一瞧，雲鬟半嚲，猶帶睡容，昨宵的況味如何？便微哂道：「嫂子恭喜！」，這一語，說得這位傅夫人，不知不覺，面上一陣一陣的熱起來了，當即匆匆辭去。
清史稿中也說：嘉慶元年，西廡增大學士傅恆、福康安、協辦大學士兆惠。福康安即傅恆子，並封郡王，異姓世臣，被恩最渥。注意：嘉慶元年，儘管嘉慶帝即位，其實大權還是乾隆皇帝掌控，能把福康安提高到異姓王的地位，可見對福康安的寵愛。
有這樣一個故事：征西過程中，福康安的轎夫跑到老百姓家裡搶東西。當地巡視都司徐斐恰好看到，趕緊上前阻攔，轎夫一把將徐斐從馬上拽下來，劈頭蓋臉一頓猛揍。川北道長官姚一如聽說了這件事，非常氣憤，想到福康安那裡告狀。有人對他說，福大人位高權重，向來抓大放小，怎麼會關心這些小事呢？你去找他，惹其生氣，反而麻煩;你們按自己的方式處理了，也沒什麼事！姚一如一聽，也對，就令人把轎夫抓起來。轎夫不知大禍臨頭，仍然肆意咆哮。姚一如先用棍子敲打了他一頓，又抽了他四十個耳光，拎起來一看，轎夫被打死了。消息傳到福康安那裡，福康安並沒有生氣。其他轎夫兔死狐悲，不依不饒，竟然集體罷工。畢竟宰相門前七品官，福康安為安慰這幫轎夫，給他們挽回點面子，居然撤掉了姚一如的成都知府。不過嘉慶帝親政以後，對福康安的做法非常反感，不僅多次斥責福康安奢靡排場，還把福康安降為貝子。