桓宣武作徐州,时谢奕为晋陵,先粗经虚怀,而乃无异常。及桓迁荆州,将西之间,意气甚笃,奕弗之疑。唯谢虎子妇王悟其旨,每曰:“桓荆州用意殊异,必与晋陵俱西矣。”俄而引奕为司马。奕既上,犹推布衣交,在温坐,岸帻啸咏,无异常日。宣武每曰:“我方外司马。”遂因酒,转无朝夕礼。桓舍入内,奕辄复随去。后至奕醉,温往主许避之。主曰:“君无狂司马,我何由得相见!”
桓温做徐州刺史时,谢奕是扬州晋陵郡太守,两个人起初只是互相客套,没什么特别的交情。到了桓温要出任荆州刺史,去西边赴任时,两人的感情就很深厚了,谢奕对此没有疑心。只有谢据的妻子王氏明白桓温的用意,经常说:“桓荆州的用意很特别,肯定会带上谢奕一起去西边。”不久桓温就任用谢奕做司马。到荆州后,谢奕还觉得自己跟桓温是像普通人之间那样随意的感情,所以去桓温那儿时,头巾随便歪着,长啸吟唱,跟过去一样。桓温常说:“谢奕是我的世外司马。”因为爱喝酒,谢奕越来越违反上下级间的礼仪。桓温丢下他走进内室,他总是跟着进去。后来谢奕一喝醉,桓温就去夫人南康公主那里躲着。公主说:“没有癫狂的司马,我哪有机会见到您呢!”