桓宣武作徐州，時謝奕為晉陵。先粗經虛懷，而乃無異常。及桓還荊州，將西之間，意氣甚篤，奕弗之疑。唯謝虎子婦王悟其旨。每曰：“桓荊州用意殊異，必與晉陵俱西矣！”俄而引奕為司馬。奕既上，猶推布衣交。在溫坐，岸幘嘯詠，無異常日。宣武每曰：“我方外司馬。”遂因酒，轉無朝夕禮。桓舍入內，奕輒復隨去。後至奕醉，溫往主許避之。主曰：“君無狂司馬，我何由得相見？”

　　林下諸賢，各有俊才子。籍子渾，器量弘曠。康子紹，清遠雅正。濤子簡，疏通高素。鹹子瞻，虛夷有遠誌。瞻弟孚，爽朗多所遺。秀子純、悌，並令淑有清流。戎子萬子，有大成之風，苗而不秀。唯伶子無聞。凡此諸子，唯瞻為冠，紹、簡亦見重當世。

　　顧長康畫謝幼輿在巖石妙。人問其所以？顧曰：“謝雲：‘壹丘壹壑，自謂過之。’此子宜置丘壑中。”