谢荣时是一位侨眷，又是台属。他的父亲谢和寿先生是国际茶叶界公认的专家，1946年和恩师沈宗瀚先生前往台湾日月潭鱼池茶场工作，后来在台湾去世。谢荣时有很多亲戚至今仍在台湾和海外定居。由于认识的“三胞”人员多，早在上世纪60年代，身为老师的谢荣时就兼职干起了侨务工作。从1979年起，谢荣时连续当选为六届市侨联委员，一直是泗门镇的侨联小组组长、“三胞”眷属联谊会会长。
       40多年来，谢荣时一直积极参加镇里和社区的统战活动，协助镇里做好侨务工作，而“三胞”人员和“三胞”眷属遇到什么困难，也都会想到谢荣时，谢荣时成了他们的贴心人。谢荣时本人也多次被评为市级侨务先进个人。
       上世纪80年代初，谢荣时协助镇里普查侨眷，了解到镇上有一位周小雅大妈，她的儿子解放前夕随厦门一家书店迁往台湾后，三十几年杳无音讯，周大妈思儿心切几乎哭瞎了双眼。谢荣时得知情况后经常去安慰她，和她聊天谈心，还送去粮食和日常生活用品接济周大妈。同时，他还写信给海外的亲友，让他们帮忙为周大妈寻亲。
       经过一番周折，周大妈当时已在美国的儿子诸炎涛先生被找到了。当诸炎涛得知老母亲还在人世，立刻携夫人飞回故乡，和母亲团聚。后来，诸炎涛先生特地和母亲一起来到谢老师家道谢。此事在当地群众中被传为佳话。
       每年镇里举办“三胞眷属”新春联欢会、中秋茶话会等活动，谢老师都会主动协助领导当好参谋，为活动献计献策。镇里来了港澳同胞和海外侨胞，谢荣时也陪同镇、社区领导登门拜访，做好慰问接待工作。
       1995年，一名叫谢瑞麟的印度尼西亚华侨拿着老祖宗的名字来余姚寻根，原来他是700年前迁到福建的谢氏后裔，后来迁到海外并在当地发展成了一个大家族。他知道自己的根在余姚，便前来寻根。受市委统战部的委托，谢荣时最终在泗门谢氏宗谱里找到了谢瑞麟老祖宗的名字。今年7月，美国侨胞谢茂炎祖孙三代来家乡探亲，希望去谢家宗祠祭拜，谢荣时全程陪同，令谢茂炎一家十分感动，表示以后还要带全家人专程回乡祭祖。
       有人问谢荣时：“您都已经退休了，为啥还这么忙碌地做工作，到底图个啥啊？”谢荣时笑着说；“退休了，什么也不图。教书可以退休，但做侨务工作我不会退休。我要活到老，干到老。