慈寧宮始建於1563年明朝嘉靖年間，是嘉靖為母親蔣太后修建的，最初的時候不叫慈寧宮，叫做仁壽宮，萬曆年間的慈聖李太后，萬曆皇帝的鄭皇貴妃、昭妃等都曾經住過這裏。後來成為了安置先皇妃子的地方。
清軍入關，沿用了明朝習俗，修繕了慈寧宮，孝莊太后成為清朝入駐慈寧宮的第一人，從此之後慈寧宮就成為太后太妃的專用住所，也就是現在養老院的意思。
孝莊太后，博爾濟吉特氏，名叫布木布泰，是孝端文皇后的侄女，12歲的時候嫁給皇太極為妻，是順治帝福臨的生母，康熙皇帝的奶奶，孝莊太后傾其一生輔佐了順治，康熙兩代明君。順治登基後，孝莊成為大清朝第一位太后，順治在位十八年間，勵精圖治使農業得到了恢復，穩定了清朝政局。順治駕崩後，康熙帝玄燁繼位，孝莊太后成為太皇太后，又繼續輔佐康熙，是一個很有能力的政治家。
順治十年，孝莊太后住進慈寧宮，這一住就是四十多年，期間，順治帝在太后過生日的時候還寫了三十多首詩讓母親高興。後來康熙繼位後，還經常前往慈寧宮看望孝莊太皇太后，在康熙二十六年的時候，孝莊太皇太后病危，玄燁曾寸步不離的陪在身邊，甚至為了延長孝莊太皇太后的壽命還舉行了祭祀儀式，願意用自己的壽命換區祖母的健康，孝莊太皇太后去世後，康熙痛不欲生。
從此之後，就沒有人敢住在慈寧宮了，歷朝太后太妃都已身份低壓不住這個地方為藉口，不願住進去。究其原因，曾經住過慈寧宮的太后説，每到晚上慈寧宮都有奏樂的聲譽，牆上還有宮女太監成隊走過的影子，並且還有一口井，白天往下看是一些石頭雜草一類的東西，晚上看下去卻是清澈的水，水中的倒影卻不是自己的臉。這樣的傳言一傳百百傳千，很快就流傳開來，從此之後再也沒有人敢住在慈寧宮了。
且不論慈寧宮有異象這個傳言的真實性有多少，但是自從孝莊太后之後，慈寧宮確實再也沒有太后或者太妃長期居住了，最後慈寧宮成為了大宴，受冊等一些重要典禮的地方了。慈寧宮鬧鬼的事情至今也是一個謎。
