蘇子高事平，王、庾諸公欲用孔廷尉為丹陽。亂離之後，百姓雕弊，孔慨然曰：“昔肅祖臨崩，諸君親升禦床，並蒙眷識，共奉遺詔。孔坦疏賤，不在顧命之列。既有艱難，則以微臣為先，今猶俎上腐肉，任人膾截耳！”於是拂衣而去，諸公亦止。

　　王江州夫人語謝遏曰：“汝何以都不復進，為是塵務經心，天分有限。”

　　過江諸人，每至美日，輒相邀新亭，藉卉飲宴。周侯坐而嘆曰：“風景不殊，正自有山河之異！”皆相視流淚。唯王丞相愀然變色曰：“當共戮力王室，克復神州，何至作楚囚相對？”