蘇子高事平，王、庾諸公欲用孔廷尉為丹陽。亂離之後，百姓雕弊，孔慨然曰：“昔肅祖臨崩，諸君親升禦床，並蒙眷識，共奉遺詔。孔坦疏賤，不在顧命之列。既有艱難，則以微臣為先，今猶俎上腐肉，任人膾截耳！”於是拂衣而去，諸公亦止。

　　客問樂令“旨不至”者，樂亦不復剖析文句，直以麈尾柄確幾曰：“至不？”客曰：“至！”樂因又舉麈尾曰：“若至者，那得去？”於是客乃悟服。樂辭約而旨達，皆此類。

　　蘇峻時，孔群在橫塘為匡術所逼。王丞相保存術，因眾坐戲語，令術勸酒，以釋橫塘之憾。群答曰：“德非孔子，厄同匡人。雖陽和布氣，鷹化為鳩，至於識者，猶憎其眼。”