桓玄敗後，殷仲文還為大司馬咨議，意似二三，非復往日。大司馬府聽前，有壹老槐，甚扶疏。殷因月朔，與眾在聽，視槐良久，嘆曰：“槐樹婆娑，無復生意！”

　　潁川太守髡陳仲弓。客有問元方：“府君何如？”元方曰：“高明之君也。”“足下家君何如？”曰：“忠臣孝子也。”客曰：“易稱‘二人同心，其利斷金；同心之言，其臭如蘭。’何有高明之君而刑忠臣孝子者乎？”元方曰：“足下言何其謬也！故不相答。”客曰：“足下但因傴為恭不能答。”元方曰：“昔高宗放孝子孝己，尹吉甫放孝子伯奇，董仲舒放孝子符起。唯此三君，高明之君；唯此三子，忠臣孝子。”客慚而退。

　　殷仲文天才宏瞻，而讀書不甚廣，博亮嘆曰：“若使殷仲文讀書半袁豹，才不減班固。”