桓玄敗後，殷仲文還為大司馬咨議，意似二三，非復往日。大司馬府聽前，有壹老槐，甚扶疏。殷因月朔，與眾在聽，視槐良久，嘆曰：“槐樹婆娑，無復生意！”

　　齊王冏為大司馬輔政，嵇紹為侍中，詣冏咨事。冏設宰會，召葛旟董艾等共論時宜。旟等白冏：“嵇侍中善於絲竹，公可令操之。”遂送樂器。紹推卻不受。冏曰：“今日共為歡，卿何卻邪？”紹曰：“公協輔皇室，令作事可法。紹雖官卑，職備常伯。操絲比竹，蓋樂官之事，不可以先王法服，為吳人之業。今逼高命，不敢茍辭，當釋冠冕，襲私服，此紹之心也。”旟等不自得而退。

　　王緒數讒殷荊州於王國寶，殷甚患之，求術於王東亭。曰：“卿但數詣王緒，往輒屏人，因論它事，如此，則二王之好離矣。”殷從之。國寶見王緒問曰：“比與仲堪屏人何所道？”緒雲：“故是常往來，無它所論。”國寶謂緒於己有隱，果情好日疏，讒言以息。