謝公在東山，朝命屢降而不動。後出為桓宣武司馬，將發新亭，朝士鹹出瞻送。高靈時為中丞，亦往相祖。先時，多少飲酒，因倚如醉，戲曰：“卿屢違朝旨，高臥東山，諸人每相與言：‘安石不肯出，將如蒼生何？’今亦蒼生將如卿何？”謝笑而不答。

　　韓康伯母殷，隨孫繪之之衡陽，於闔廬洲中逢桓南郡。卞鞠是其外孫，時來問訊。謂鞠曰：“我不死，見此豎二世作賊！”在衡陽數年，繪之遇桓景真之難也，殷撫屍哭曰：“汝父昔罷豫章，徵書朝至夕發。汝去郡邑數年，為物不得動，遂及於難，夫復何言？”

　　王右軍與謝太傅共登冶城。謝悠然遠想，有高世之誌。王謂謝曰：“夏禹勤王，手足胼胝；文王旰食，日不暇給。今四郊多壘，宜人人自效。而虛談廢務，浮文妨要，恐非當今所宜。”謝答曰：“秦任商鞅，二世而亡，豈清言致患邪？”