谢安不仅是东晋一位杰出的政治家，而且博学多才，风度优雅，为东晋名士之冠。江左重人物，风流学养特为士人所矜重，谢安在这些方面，都体现了优秀的素质。

玄学作为侨姓士族的文化标志在整个社会生活中占重要地位。对玄理的掌握和谈玄技巧成为一项重要的价值标准。谢安便精于玄道。二十来岁时，拜访名士王濛，与他清谈了很久，大受赞赏。曾与许询、支道林等人聚集在王濛家。谢安提议大家在一起言咏写怀，于是共解《渔父》。谢安看题，令众人解释，支道林先解，讲了七百余语，叙致精丽，才藻奇拔，众人无不称善。大家都各抒己见之后，谢安谈自己的见解，讲了万余语，才峰奇逸，萧然自得，在座的人，莫不钦服。许、王、支都是东晋有名的谈手，而皆服于谢安，可见谢安玄学知识的渊博和言谈的精炼。

谢安亦通儒家经典。宁康三年（375），孝武帝将讲孝经，谢安与弟谢万等人在宫廷侍读，中书郎车胤摘句，不懂的地方便问谢安兄弟，一而再，再而三，深感不安，便对袁宏说，“不问则德音有遗，多问则重劳二谢。”袁宏劝他不必担心，因为“明镜不疲于屡照。”意即谢安学识渊博，通经熟典，为人解答疑难不会有什么困难。

在文学方面，谢安也很有修养。能诗善文，才学华丽。早年在东山，“出则渔弋山水，入则言咏属文。”《全三国两晋南北朝诗》所收谢安诗作十来首。曾写简文帝谥议，文理深得，为朝廷所采纳。桓温阅后，递给在座其他人看，并说：“这是安石碎金。”他闲居时，常与子侄们论文作诗，成了当时文坛佳活。

谢安性好音乐，精通乐理，曾与戴逵谈论琴书。自弟谢万死后，十年不听音乐。及登台辅，却不因丧废乐。王坦之屡次写信劝阻他，说居丧废乐是儒教大礼，希望谢安能维持礼治。但谢安却回信说：“我所追求的是声律，可称为情，所以没有什么不可作的，正聊以乐自娱，若要尊崇世教，纯洁行为，则不但不可提倡，亦非所屑。”他曾对王羲之说：“中年伤于哀乐，每次与亲人离别，总有几天心情不愉快。”王羲之安慰他说：“年纪大了，自然如此，正要依靠音乐来陶冶性情。”谢安晚年居丧行乐，谅必有寄兴托情的因素。而社会上的人将它视为风雅的行为而竞相仿效，遂成当时一种风尚。

除音乐外，谢安还“工书善画”。他很喜欢顾恺之的画，称赞其画是“自生人以来未有也。”可见他对绘画有一定的爱好和鉴赏能力。曾经跟王羲之学草书，王羲之称赞他是“解书者”，说明他不仅会书法，而且懂书法理论，同时也有自己的欣赏能力。谢安的行书、隶书都写得很好。南朝羊欣所编《古来能书人名》及王僧虔《论书》等，都把谢安作为东晋书法家。