1973年,赵雅芝参加TVB举办的首届香港小姐竞选,并获得第四名。1976年,赵雅芝因向往演艺圈工作而辞去空中小姐一职,加入TVB电视戏剧组,并开始参演电视剧。其后,赵雅芝也在多部电视剧中担任女主角,从70年代始至80年代成为TVB旗下当家花旦。
而在电影方面,赵雅芝于1976年出演电影《半斤八两》女主角。之后,赵雅芝与狄龙合作电影《教头》,与尔冬升合作电影《英雄无泪》,拍摄许鞍华导演的经典电影《疯劫》。同时她也在《弹指神功》及《风铃中的刀声》中饰演蓉蓉一角。而在1981年,赵雅芝生完孩子后,客串青春电影《失业生》。
1985年,赵雅芝与TVB合约期满,因为家中有三个儿子需要全心抚养,赵雅芝选择退隐江湖,结束与老东家12年之宾主关系。在台湾制作人的优厚待遇和配合寒暑假档期的情况下,偶尔会去台湾拍戏,曾参演《京华烟云》《戏说乾隆》《新白娘子传奇》等电视剧。
2002年,赵雅芝重返TVB,首部回归作为《西关大少》,再次与刘松仁合作,饰演善良慈祥秘书伍玉卿一角。而赵雅芝参与拍摄完毕后,随即离开TVB。