謝公在東山，朝命屢降而不動。後出為桓宣武司馬，將發新亭，朝士鹹出瞻送。高靈時為中丞，亦往相祖。先時，多少飲酒，因倚如醉，戲曰：“卿屢違朝旨，高臥東山，諸人每相與言：‘安石不肯出，將如蒼生何？’今亦蒼生將如卿何？”謝笑而不答。

　　天下有王，分地建国，置都立邑，设庙祧坛墠而祭之，乃为亲疏多少之数。是故：王立七庙，一坛一墠，曰考庙，曰王考庙，曰皇考庙，曰显考庙，曰祖考庙；皆月祭之。远庙为祧，有二祧，享尝乃止。去祧为坛，去坛为墠。坛墠，有祷焉祭之，无祷乃止。去墠曰鬼。诸侯立五庙，一坛一墠。曰考庙，曰王考庙，曰皇考庙，皆月祭之；显考庙，祖考庙，享尝乃止。去祖为坛，去坛为墠。坛墠，有祷焉祭之，无祷乃止。去墠为鬼。大夫立三庙二坛，曰考庙，曰王考庙，曰皇考庙，享尝乃止。显考祖考无庙，有祷焉，为坛祭之。去坛为鬼。适士二庙一坛，曰考庙，曰王考庙，享尝乃止。皇考无庙，有祷焉，为坛祭之。去坛为鬼。官师一庙，曰考庙。王考无庙而祭之，去王考曰鬼。庶士庶人无庙，死曰鬼。

　　謝公聞羊綏佳，致意令來，終不肯詣。後綏為太學博士，因事見謝公，公即取以為主簿。