初桓南郡、楊廣共說殷荊州，宜奪殷覬南蠻以自樹。覬亦即曉其旨，嘗因行散，率爾去下舍，便不復還。內外無預知者，意色蕭然，遠同鬥生之無慍。時論以此多之。
殷仲文天才宏瞻，而讀書不甚廣，博亮嘆曰：“若使殷仲文讀書半袁豹，才不減班固。”