潘志文于1967年投身影视圈，成为国泰电影公司的第一期训练班学员，其间参与过一些电影演出，并接受粤曲粤剧及时代曲训练。1968年考入电影训练班。78年初正在香港电台走红的潘志文加盟丽的电视，为原本缺乏号召力小生的电视台注入新鲜血液。且看他当年的“战绩”：
1978-1979年间，他先后演出丽视里程碑意义的89集长剧《鳄鱼泪》，然后于中间加入演出65集《巨星》，再于年底演出80集《变色龙》，这也令他间接在1979年要继续演出50集《新变色龙》，中间还要客串演出《沈胜衣》及担正《侠盗风流》。然后继续演出60集《怒剑鸣》。丽视当年更为他在电视台大楼安排私人休息室，之后休息一排后，他还要再演出70集的《大地恩情》，便知潘翁当年的确是丽视首席小生。而他更于1978、1979年连续两次当选《华侨晚报》十大电视明星金球奖。然而，1981年澳洲帮入主丽视后，潘翁与王钟、朱江等人却被评为“高薪无号召”，而遭解约。但82年尾潘翁却以部头约形式再与亚视合作。期间拍摄剧集有数十套之多，而著名的如：《武则天》、《八仙过海》、《秦始皇》、《满清十三皇朝》等。其中于《秦始皇》中的出色演出更被亚视老板邱德根在《秦始皇》庆功宴上大赞，并点名他演《西施》的男主角。为此潘翁推掉台湾片约，与亚视关系更加好，所以潘翁直至1994年仍在亚视效力，2002年又在资深监制陈宝华力邀之下，复出为亚视拍剧。2004年他再次离开电视台，相信喜欢他的观众实看不够。潘志文是香港无线电视训练班出身的，后来为香港电台电视部拍摄电视剧后开始为人认识（家父都指那时知道潘翁的存在），其中狮子山下里演出徙置屋村里小市民（由良鸣演）的儿子，是个小警员，有一个邻居爱人（是长发姑娘葛剑青演）还有是在小时候演王书麒，路嘉敏的叔叔...
其后潘翁在丽的电视主演了长篇剧《鳄鱼泪》，拉开丽的电视黄金时期序幕。之后又接连主演了脍炙人口的《变色龙》、《侠盗风流》、《大地恩情》等经典剧集，一举奠定其丽的电视首席小生地位，并凭藉其出色演技于1978年、1979年、1980年连续三年捧得华侨日报举办的十大电视明星金球奖，演艺成就倍受肯定。1982年，丽的电视改组为亚洲电视，潘翁亦再接再厉，接连演出了《八仙过海》、《武则天》、《满清十三皇朝》等几十部人们耳熟能详之剧集，演技日臻纯熟。其间除了拍摄电视与电影，潘翁亦曾到星、马、泰、澳洲、美国及中国内地登台演唱，极受当地观众欢迎。
1995年，潘翁加盟无线电视，同样奉献给了观众《天地男儿》、《新上海滩》、《天龙八部》等等一系列精彩之作。1996年底，潘翁移民加拿大温哥华，同样活跃于当地影视界，曾担任当地电台清谈节目及新时代电视栏目《大城小聚》主持，深受听众及观众拥戴，同时亦加入“温哥华影视人协会”，连同协会成员参与各类慈善演出活动。而自2002年始，潘翁亦间或返港拍戏，近年的《吉祥任务》、《子是故人来》、《万家灯火》、《妈妈我真的爱你》、《义无反顾》等，观众们均能领略到他精彩绝伦的演技。
2007年伊始，潘翁更是首次涉足舞台剧领域，携同“温哥华影视人协会”众艺人为观众联袂奉上大型经典舞台剧《我和春天有个约会》。
