生于江苏常州，原名稚，字壮暮、稚柳，号迟燕。师从江南名字家钱名山习诗词、经史子集。谢氏专研艺术，曾移居重庆，与张大千、沈尹默等艺术家研究中国艺术史，并曾陪同张大千赴敦煌研究敦煌壁画。其艺术融合中国隋唐古代及个人艺术风格，形成独特的艺术思想。谢氏曾任国立中央大学艺术系及国立重庆艺专教授与上海博物馆顾问，是现代著名书画家及书画鉴定专家。