有書記載，咸豐不顧兵敗割地賠款，國家陷於危難之中，躲在熱河行宮寄情於聲色，聊以自娛，自我麻醉。他有所謂漢女"四春"：牡丹春、海棠春、杏花春、陀羅春，整天一起在園中游玩嬉鬧。此外更有他十分眷愛的"天地一家春"，就是慈禧。
原來，慈禧見他整日和四春在一起，醋意大生，和咸豐吵鬧不休。寵愛慈禧的咸豐沒辦法，遂贈慈禧"天地一家春"意思是説天地之間你是最大的春意！慈禧這才滿意。
還有野史説咸豐養着一位民間寡婦。《野史叟聞》記載：咸豐鍾情於一位寡婦曹氏，山西人，長得秀美妖豔，嫵媚動人。入宮以後，咸豐最為眷戀。野史類似的記載還有："山西籍孀婦曹氏，風流姝麗，腳纖小，喜歡在鞋履上綴以明珠。咸豐帝召入宮中，最為眷愛。"
咸豐年間太平軍、捻軍戰事連年，咸豐帝不得不關注朝事。且看他詢問民情軍情的話：
問張集馨："湖廣白蓮教齊二寡婦長的什麼樣子？為何能以一個婦人聚眾鬧出那麼大事？"
"聽説福建民間家族械鬥，不知道打得如何熱鬧？死了多少人？喪命的人賠償多少錢呢？"
召見段光清時，恰值浙江巡撫奏報餘姚佃農抗租，聚眾進城，焚燒惡霸邵五住宅的事。咸豐帝問段光清是否知道此事，段光清不願細説，只説主佃發生口角，至於打鬥，不過土匪之類罷了。
咸豐帝一聽到土匪就緊張了，急忙問："土匪厲害不厲害？會鬧大嗎？知縣能剷除這幫土匪嗎？"段光清回答説知縣能平土匪，咸豐的情緒才緩和下來。
咸豐喜歡問及官員相貌與官兵是否接近女色、男色。他曾問張集馨："勝保帳篷裏是否都是美女俊男？向榮知道不知道江北兵勇私養女人，不肯打仗？"
咸豐帝的發問雖然多半是出於好奇，但他問將領和軍士是否好女色、男色，也許反映了他的內心世界。
