簡文作撫軍時，嘗與桓宣武俱入朝，更相讓在前。宣武不得已而先之，因曰：“伯也執殳，為王前驅。”簡文曰：“所謂‘無小無大，從公於邁’。”

　　桓宣武與袁彥道樗蒱，袁彥道齒不合，遂厲色擲去五木。溫太真雲：“見袁生遷怒，知顏子為貴。”

　　桓宣武既廢太宰父子，仍上表曰：“應割近情，以存遠計。若除太宰父子，可無後憂。”簡文手答表曰：“所不忍言，況過於言？”宣武又重表，辭轉苦切。簡文更答曰：“若晉室靈長，明公便宜奉行此詔。如大運去矣，請避賢路！”桓公讀詔，手戰流汗，於此乃止。太宰父子，遠徙新安。