殷顗、庾恒並是謝鎮西外孫。殷少而率悟，庾每不推。嘗俱詣謝公，謝公熟視殷曰：“阿巢故似鎮西。”於是庾下聲語曰：“定何似？”謝公續復雲：“巢頰似鎮西。”庾復雲：“頰似，足作健不？”
殷仲文既素有名望，自謂必當阿衡朝政。忽作東陽太守，意甚不平。及之郡，至富陽，慨然嘆曰：“看此山川形勢，當復出壹孫伯符！”