謝太傅寒雪日內集，與兒女講論文義。俄而雪驟，公欣然曰：“白雪紛紛何所似？”兄子胡兒曰：“撒鹽空中差可擬。”兄女曰：“未若柳絮因風起。”公大笑樂。即公大兄無奕女，左將軍王凝之妻也。
顧長康畫謝幼輿在巖石妙。人問其所以？顧曰：“謝雲：‘壹丘壹壑，自謂過之。’此子宜置丘壑中。”