蘇子高事平，王、庾諸公欲用孔廷尉為丹陽。亂離之後，百姓雕弊，孔慨然曰：“昔肅祖臨崩，諸君親升禦床，並蒙眷識，共奉遺詔。孔坦疏賤，不在顧命之列。既有艱難，則以微臣為先，今猶俎上腐肉，任人膾截耳！”於是拂衣而去，諸公亦止。

　　昔者周公朝诸侯于明堂之位：天子负斧依南乡而立；三公，中阶之前，北面东上。诸侯之位，阼阶之东，西面北上。诸伯之国，西阶之西，东面北上。诸子之国，门东，北面东上。诸男之国，门西，北面东上。九夷之国，东门之外，西面北上。八蛮之国，南门之外，北面东上。六戎之国，西门之外，东面南上。五狄之国，北门之外，南面东上。九采之国，应门之外，北面东上。四塞，世告至。此周公明堂之位也。明堂也者，明诸侯之尊卑也。

　　桓玄詣殷荊州，殷在妾房晝眠，左右辭不之通。桓後言及此事，殷雲：“初不眠，縱有此，豈不以‘賢賢易色’也。”