潘志文自小因父母离异，寄人篱下，在澳门长大。早年就读于教业中学（银业小学），毕业后到香港发展。
1967年，投身影视圈，投考国泰电影公司，凭舞艺被录取。
1968年，成为国泰电影公司的第三期训练班学员，其间参与过一些电影演出，更得到香港著名舞蹈家毛妹的赏识，锐意栽培他成为芭蕾舞蹈员。电影训练班毕业后，加入香港电台担任广播工作，赢得了“播音王子”的雅号；同年，香港电台成立龙翔剧团，担任龙翔剧团演员，并接受粤曲粤剧及时代曲训练。
1970年，主演香港电台广播剧《米高冯的故事》。
1971年，开始踏入电视圈，经常在丽的电视与无线电视演出，但均无合约。出演侦探剧《法网难逃》，常以反派姿态出现；后来改变戏路，在《欢乐今宵》中演过几出戏剧；曾参加演出无线电视长篇话剧《向日葵》、《春晖》，《琉璃世界》、《乐韵雏声》、《小凤仙》、《私恋》等，一度被误会是无线第一期训练班艺员。后加入无线剧集《变》担正男主角。
1973年，在香港电台参加播音工作，以俊美容貌及靓声，成为出得幕前的镇台小生。经常参加电视部《狮子山下》演出，甚得观众好感。
1974年，主演香港电台《狮子山下之警察》。
1975年7月17日，正式加盟香港电台电视部《狮子山下》节目，成为基本演员。
1976年，出演无线话剧《初恋》；先后演出丽的多部经典剧集《十大奇案》、《三国春秋》等。此外，戏剧节目中，总少不了潘志文一份，《鱼肠剑》、《吕四娘》、《秋瑾》、《干将莫邪》、《乐在吾家》、《恒生剧场》、《人海奇情》等。
1977年，担任电视节目《警讯》的主持人；同年，出演港台《小时候》。
1978年，加盟丽的电视。
1978-1979年间，主演经典长剧《鳄鱼泪》，拉开丽的电视黄金时期序幕；中间演出《巨星》后，再主演了脍炙人口的《变色龙》、《侠盗风流》、《新变色龙》等经典剧集，一举奠定其丽的电视首席小生地位。
1979年，出演《沈胜衣》；主演《故乡新貌》；出演《大白鲨》；主演长篇武侠剧《怒剑鸣》。
1980年，主演经典电视长剧《大地恩情》系列，是潘志文的代表作之一。
1981年，主演《珠海枭雄》、《大昏迷》、《天使危机》、《荡寇志》等电视剧。
1982年，丽的费用缩减，与丽的不再续约。
1982年，主演港台电视部制作《一点烛光》之《旧梦》；3月，担任“八二一八共结缘”主持人；4月，客串港台《水天一色》节目。
1982年，丽的电视改组为亚洲电视；9月底，以部头约形式再与亚视合作，首次合作主演《血债血偿》。
1983年，主演《浮生三记》、《园中缘》。
1984年，主演《武则天》；主演《八仙过海》，饰演吕洞宾，是潘志文的代表作之一。
1985年，主演《天涯明月刀》、《秦始皇》。
1986年，主演《时势英雄》、《柔情点三八》。
1987年，主演《金凤凰》、《满清十三皇朝》之《皇太极》、《成吉思汗》
1989年，主演《皇家档案》第三辑、《火百合》。
1990年，主演电视电影《午马行动》。
1995年，加盟无线电视，出演了《天地男儿》、《新上海滩》、《天龙八部》等一系列精彩之作。
1998年，出演TVB剧《西游记II》；同年，移民加拿大温哥华，活跃于当地影视界，担任当地电视栏目《大城小聚》主持。
2002年，复出返港为亚视拍剧《吉祥任务》、《子是故人来》、《万家灯火》、《妈妈我真的爱你》、《义无反顾》等。
2004年，再次离开电视台。
2007年，主演三场音乐舞台剧《我和春天有个约会》。
2010年—2011年，出演音乐剧《情话紫钗》。
2013年，接拍《大药坊》，重出荧幕。回巢后为无线拍摄多部剧集，包括《再战明天》、《以和为贵》、《流氓皇帝》、《华丽转身》以及《冲线》等。
2016年，参演《超能老豆》；参演TVB台庆剧《幕后玩家》。
2017年，参演TVB贺岁剧《乘胜狙击》。
2018年，参演《再创世纪》。
2019年，参演《丫鬟大联盟》、《飞虎之雷霆极战》。
2020年，参演《机场特警》、《踩过界2》。
2021年，参演《陀枪师姐2021》；5月3日，参演电视剧《逆天奇案》。
2023年2月20日，参演悬疑剧《廉政狙击》；4月10日，参演时装律政剧《法言人》；10月16日，参演电视剧《罗密欧与祝英台》。
《小时候》、《狮子山下》、《鳄鱼泪》、《变色龙》、《沈胜衣》、《秦始皇》、《天龙八部》、《新上海滩》、《天涯明月刀》、《大地恩情》、《侠盗风流》、《天地男儿》、《八仙过海》
《人约黄昏》
《人细鬼大》
《告别有情天》
《告別有情天》
《林美黛传》
《夺宝俏佳人》
《夺宝奇谋》
《国父孙中山与开国英雄》
《香港香港之涟漪》
《狮子山下：解毒》
《小時候：貴族學校》
《小時候：街上足球隊》
《小時候：哥哥與妹妹》
《狮子山下：男子汉》
《狮子山下：想当年》
《狮子山下：读书难》
《小時候：老人與錢》
《垃圾》
《狮子山下 学师仔》
《狮子山下：十年后》
《獅子山下：回巢》
《浪子心声》
《罗密欧与祝英台》
《法言人》
《非常检控观》
《廉政狙击》
《陀枪师姐》
《逆天奇案》
《荒诞剧团》
《飞虎之壮志英雄》
《踩过界2》
《机场特警》
《盲侠大律师》
《丫鬟大联盟》
《飞虎之雷霆极战》
《再创世纪》
《乘胜狙击》
《幕后玩家》
《超能老豆》
《爱情食物链》
《EU超时任务》
《纯熟意外》
《华丽转身》
《冲线》
《水发胭脂》
《再战明天》
《大药坊》
《法网群英》
《电视风云50年》
《义无反顾》
《妈妈我真的爱你》
《子是故人来》
《万家灯火》
《吉祥任务》
《冤家宜结不宜解》
《天地争霸美猴王》
《廉政行动》
《聊斋贰》
《大刺客》
《天龙八部》
《地狱天使》
《天地男儿》
《新上海滩》
《一切从失踪开始》
《包青天》
《君临天下》
《戏王之王》
《冬日骄阳》
《龙泉奇侠》
《碧血青天杨家将》
《凤凰传说》
《洪熙官》
《岳飞传》
《碧血青天珍珠旗》
《赌神秘笈之赌魔》
《皇家警察实录2》
《天蚕变之再与天比高》
《马场风云》
《赌神秘笈》
《一千灵异夜》
《烈火雄风》
《摩登七十二家房客》
《仙鹤神针》
《独孤神剑》
《争雄岁月》
《豪门》
《乖女也疯狂》
《碧梅风暴》
《大富大贵》
《黑帮系列》
《皇家档案》
《历代奇女子》
《赛金花》
《金凤凰》
《满清十三皇朝Ⅰ》
《成吉思汗》
《秦始皇》
《柔情点三八》
《时势英雄》
《西施》
《八仙过海》
《天涯明月刀》
《武则天》
《浮生三记》
《园中缘》
《血债血偿》
《珠海枭雄》
《天使危机》
《大昏迷》
《荡寇志》
《大地恩情》
《怒剑鸣》
《新变色龙》
《侠盗风流》
《银剑杀手沈胜衣》
《巨星》
《变色龙》
《鳄鱼泪》
《小时候》
《浪淘沙》
《恒生剧场》
《七种武器》
《锦绣人生》
《大家姐》
《乐在吾家》
《三国春秋》
《十大刺客》
《十大奇案》
《人海奇情》
《吴园柳庄》
《狮子山下》
《变》
《私恋》
《小凤仙》
《警讯》
《向日葵》
《琉璃世界》
《春晖》
《法网难逃》
