袁盎在处理淮南厉王谋反及善后的问题上,表现出一定的才识,得汉文帝赏识,在朝廷也很有名望。宦官赵谈,因其特殊身份,也很受文帝宠幸,经常在文帝面前进谗袁盎。袁盎十分讨厌他,却又一时无好办法对付他。袁盎侄子常侍骑袁种对袁盎说:“您跟他斗,别怕他。最好当皇上的面羞辱他,让皇上不听他的诋毁。”袁盎记在心里。一次,汉文帝外出,赵谈和汉文帝同车。袁盎拜伏车前说:“微臣听说天子所与同车的人,应都是天下豪杰英雄。现今汉虽然缺少这样的人,陛下也犯不着非要与身体残缺不全的人同车呀。”于是,汉文帝笑笑,叫赵谈下车。赵谈无法,只好流着眼泪恋恋不舍地下了车。此后,汉文帝对他也日渐疏远。