可惜的是，雍正去世，乾隆繼位后，怡親王一脈還是受到了打壓，兩個(gè)哥哥分別受到革爵和警告處罰，而作為怡親王的弘曉，也僅僅成為紫禁城的保安(乾清門(mén)侍衛(wèi))。乾隆五年才晉升為正白旗漢軍都統(tǒng)，然而沒(méi)過(guò)幾年，又被革職，理由卻是祭祖時(shí)，身邊不佩小刀，有失滿洲舊俗，甚至還在大臣面前訓(xùn)斥(電視劇的理由為肉里加鹽)?？梢哉f(shuō)，皇帝完全就是針對(duì)你，你還沒(méi)有任何反駁的機(jī)會(huì)。

后來(lái)乾隆更是將雍正賜給胤祥的交輝園改賜大學(xué)士傅恒，而怡親王一大家子只好搬到另一處較小的宅邸居住，可以說(shuō)是非常凄慘了，完全沒(méi)有一點(diǎn)鐵帽子王的待遇，可惜當(dāng)年胤祥還費(fèi)盡心機(jī)，削弱自己家族的勢(shì)力，只希望得到善待，卻依舊沒(méi)有任何效果，不過(guò)怡親王這一脈雖然被打壓，但是并沒(méi)有被廢除。

胤祥死后，怡親王一共傳了8代，有9人世襲王位，只是在后世中，只有第五世孫載垣襲爵時(shí)，備受重用，先后當(dāng)過(guò)御前大臣、領(lǐng)侍衛(wèi)內(nèi)大臣等要職，咸豐帝死后更是成為“顧命八大臣”之首。可惜在慈禧發(fā)動(dòng)“辛酉政變”中，顧命八大臣載垣、端華被賜自盡，肅順被梟首，其余五人也被革職罷黜。

但是怡親王的爵位也沒(méi)有被正式廢除，只是這幾年中斷了，在1864年恢復(fù)，由載垣堂兄弟載敦承襲。隨后怡親王一脈傳承下來(lái)，直到清朝滅亡，做到與國(guó)同休，而末代怡親王叫毓麒，在民國(guó)時(shí)期去世，宣布怡親王一脈正式消亡。