刘骜从鸿嘉(公元前20—前17年)以后,对内宫诸姬妾关注得要多些。有个在“倢伃”身边侍奉的女子叫李平,因受到倢伃的宠爱,也立为倢伃。刘骜说:“当初皇后也出身微贱。”就赐李平姓卫,这就是所说的卫倢伃。后来赵飞燕姐妹从微贱慢慢富贵起来,她们无视礼制,慢慢博得并独享刘骜的宠爱。于是班倢伃和许皇后都失宠,见刘骜一面越来越难。鸿嘉三年,即公元前17年,赵飞燕诬告许皇后、班倢伃诅咒后宫,及于皇上。许皇后被废弃。有关方面审问班倢伃,班倢伃回答:“我听说‘死生有命,富贵在天’。规规矩矩做人还未蒙受幸福,为非作歹还能有什么指望?假使鬼神有知,不会接受冒犯鬼神的话;如果无知,胡言乱语又有什么作用? 所以我根本不会干那样的事!”刘骜认为她回答得很好,怜悯她,赏赐黄金百斤。