一怒之下，把许皇后废居昭台宫。赵氏姐妹还想利用这一机会对她们的主要情敌班婕妤加以打击，诬陷班婕妤参与“巫蛊”案。汉成帝听信谗言。然而班婕妤却从容不迫地对称：“我知道人的寿命长短是命中注定的，人的贫富也是上天注定的，非人力所能改变。修正尚且未能得福，为邪还有什么希望？若是鬼神有知，岂肯听信没信念的祈祷？万一神明无知，诅咒有何益处！我非但不敢做，并且不屑做！汉成帝觉得她说的有理，又念在不久之前的恩爱之情，特加怜惜，不予追究，并且厚加赏赐，以弥补心中的愧疚。
班婕妤是一个有德操的贤淑妇女，经不起互相谗构、嫉妒、排挤、陷害的折腾，为免今后的是是非非，她认为不如急流勇退，明哲保身，因而缮就一篇奏章，自请前往长信宫侍奉王太后，把自己置于王太后的羽翼之下，就也不怕赵飞燕姐妹的陷害了，汉成帝允其所请。
班婕妤前往长信宫侍奉王太后，从此呆在深宫。班婕妤怜悯年华老去，借秋扇自伤，作《团扇诗》，又称《怨歌行》，班婕妤自知，自己如秋后的团扇，再也得不到汉成帝的怜爱了。不久，赵飞燕被册封为皇后，赵合德也成了昭仪，然而这些都与班婕妤无关了，她除了陪侍王太后烧香礼拜之外，长昼无俚，弄筝调笔之余，间以涂涂写写，以抒发心中的感慨，从而为文坛留下了许多诗篇。 汉成帝在绥和二年三月，崩于未央宫。汉成帝崩逝后，班婕妤要求到成帝陵守墓以终其生。于是王太后让班婕妤担任守护陵园的职务，从此班婕妤每天陪着石人石马，冷冷清清地度过了她孤单落寞的晚年。大概一年后班婕妤就病逝了。
原来是大美女班婕妤，我可不能让这位大才女进宫。