桓宣武既廢太宰父子，仍上表曰：“應割近情，以存遠計。若除太宰父子，可無後憂。”簡文手答表曰：“所不忍言，況過於言？”宣武又重表，辭轉苦切。簡文更答曰：“若晉室靈長，明公便宜奉行此詔。如大運去矣，請避賢路！”桓公讀詔，手戰流汗，於此乃止。太宰父子，遠徙新安。

　　王江州夫人語謝遏曰：“汝何以都不復進，為是塵務經心，天分有限。”

　　有人問袁侍中曰：“殷仲堪何如韓康伯？”答曰：“理義所得，優劣乃復未辨；然門庭蕭寂，居然有名士風流，殷不及韓。”故殷作誄雲：“荊門晝掩，閑庭晏然。”