桓玄敗後，殷仲文還為大司馬咨議，意似二三，非復往日。大司馬府聽前，有壹老槐，甚扶疏。殷因月朔，與眾在聽，視槐良久，嘆曰：“槐樹婆娑，無復生意！”

　　陳元方遭父喪，哭泣哀慟，軀體骨立。其母湣之，竊以錦被蒙上。郭林宗吊而見之，謂曰：“卿海內之俊才，四方是則，如何當喪，錦被蒙上？孔子曰：‘衣夫錦也，食夫稻也，於汝安乎？’吾不取也！”奮衣而去。自後賓客絕百所日。

　　有人問袁侍中曰：“殷仲堪何如韓康伯？”答曰：“理義所得，優劣乃復未辨；然門庭蕭寂，居然有名士風流，殷不及韓。”故殷作誄雲：“荊門晝掩，閑庭晏然。”