桓宣武既廢太宰父子，仍上表曰：“應割近情，以存遠計。若除太宰父子，可無後憂。”簡文手答表曰：“所不忍言，況過於言？”宣武又重表，辭轉苦切。簡文更答曰：“若晉室靈長，明公便宜奉行此詔。如大運去矣，請避賢路！”桓公讀詔，手戰流汗，於此乃止。太宰父子，遠徙新安。

　　頭責秦子羽雲：“子曾不如太原溫颙、潁川荀宇、範陽張華、士卿劉許、義陽鄒湛、河南鄭詡。此數子者，或謇吃無宮商，或尪陋希言語，或淹伊多姿態，或讙嘩少智谞，或口如含膠飴，或頭如巾虀杵。而猶以文采可觀，意思詳序，攀龍附鳳，並登天府。”

　　桓玄敗後，殷仲文還為大司馬咨議，意似二三，非復往日。大司馬府聽前，有壹老槐，甚扶疏。殷因月朔，與眾在聽，視槐良久，嘆曰：“槐樹婆娑，無復生意！”