24H直播

AI虛擬角色跨足多元領域,重塑職場與日常生活【獨立特派員】

發布時間: 更新時間:
藉助建模與動畫技術,以及會深度學習的大語言模型等科技,現在很多領域都會創造AI角色。醫療界已經有AI衛教師,可以用族語來跟原住民溝通;媒體界也將有AI手語新聞主播報氣象,甚至在重大災難時,即時用手語傳達逃生訊息。這些AI角色是怎麼生成,又是如何和人類協作、執行任務?

AI浪潮走入醫院 人工智慧如何輔助醫療?

2025年,全球AI產業第一個重磅新聞,是中國推出DeepSeek,不但免費,還宣稱有超強的大語言模型;即便各界評價不一,仍成為業界震憾彈。而大語言模型,是一種基於人工智能和機器學習的模型,專門用來理解和生成自然語言。

來到醫院,也能看到大語言模型技術的應用。搭上AI浪潮,花蓮慈濟醫院在109年成立AI中心,推出不少輔助醫療的AI設備。AI智慧醫療興起,協助判讀複雜、海量的資料,甚至能精準診斷。

花蓮慈濟醫院副院長吳彬安提到,身為放射科醫師,很多人會擔心AI會導致自己失業,但其實AI可以幫忙檢測、找出沒有注意到的問題,診斷治療、病人的藥效成果,也能更快速的去判斷及執行。

裝在病人身上的這個血糖偵測儀,能全天測量病患血糖變化。(圖/獨立特派員)

 

這台血糖偵測儀能將資料傳到平台,以AI運算分析血糖趨勢,而這些數據可作為醫護人員向病人衛教的依據。花蓮慈濟醫院護理部個管師王懿萱說:「我們過去都只會是猜測病人為什麼血糖高,現在有數值、生活的紀錄,可以讓我們跟病人有很好的解釋。」

 

突破語言障礙 AI衛教師成為溝通橋樑

花蓮慈濟醫院有不少太魯閣族長輩者病患,但護理師大多不會講族語。於是院方和台灣人工智慧實驗室合作,這個虛擬主播製作的平臺,只要輸入衛教文字稿,就能生成出AI衛教師影片。

要生成AI衛教師影片,需要運用AI生成虛擬替身Avatar。(圖/Taiwan AI Labs)

 

台灣人工智慧實驗室創辦人杜奕瑾說:「只要我們有夠多的主播的影像,就可以讓AI去學習,做出它這個影像的特色,從聲音到型態都可以去學習。」生成替身Avatar之後,再結合由台灣團隊打造的聯邦式GPT,擁有無縫串接逐字稿、語音生成、虛擬主播及聯合學習平台的功能。

杜奕瑾表示,聯邦式的方法可以訓練中英台語,以台灣為基礎的語言模型。運用聯邦式GPT,這位AI衛教師會講18種語言,包含太魯閣族語。太魯閣族語言發展協會理事長吉洛‧哈簍克,負責研究如何將醫療相關用詞轉譯成族語,為AI衛教師的生成建立語言資料庫。他承擔起這個任務,是因為看過太多國語不流利的族人長輩,因就醫資訊溝通不良而影響療程。

但密密麻麻的族語文字資料裡,缺乏醫學詞彙,例如沒有糖尿病這病名,若要轉譯,吉洛‧哈簍克得先查定義和解釋,再另創新詞。擔任太魯閣族字典編纂工作、為族語復興貢獻許多歲月的他,沒想到有一天,出現幫助族語傳播的AI科技。

護理師和AI衛教師協作,促進醫病溝通與關係,也在醫院護理師普遍缺工的窘境下,減輕護理站工作負擔。(圖/獨立特派員)

 

AI手語主播 促進聽障者資訊平權

而AI衛教師背後的虛擬主播相關科技,也廣泛運用在媒體影視產業。台灣人工智慧實驗室創辦人杜奕瑾表示,地震、颱風的時候,如果緊急需要有主播來做報導,實際上Avatar就可以出場。

而緊急訊息時常攸關災難或生命,但聽障者是資訊取得較弱勢的族群,沒有24小時的手語新聞頻道,往往無法即時得知。因此公視和工研院合作,推出AI手語主播,生成過程經過手語翻譯、骨架估測、及影像生成三個步驟。尤其在骨架估測部分,需要大量手語動作序列的資訊,研發團隊必須先蒐集攝影棚內真人主播的影片。

手語主播手勢流暢,搭配鮮明的表情強調語氣,清楚表達資訊。(圖/獨立特派員)

 

但建立動作序列資訊其實不容易,因為手指關節小,而手語動作又細緻,AI的骨架節點偵測無法達到完全精確,加上手語影像有許多關節視覺死角難標註,阻礙AI學習。工研院資通所組長王恩慈表示,AI主播手語的動作必須正確外,對應的臉部神色,也是聽障者接收資訊的重要依據,因此表情流暢度對研發團隊來說,也是挑戰。

而各個領域其實分別有慣用的手語,目前工研院擷取出了,約1300個氣象相關手語單字,從訓練AI手語氣象主播起步,把它訓練得更強大後,未來能為聽障者及時傳播災害及逃生的緊急訊息,促進聽障者的資訊平權。在未來,各領域若能善用AI角色,許多以往的不可能,或許將實現。

現在加入公視會員,除了有專屬推薦新聞,還有機會免費喝咖啡!
本網站使用 Cookie 技術提升體驗,詳見服務條款。繼續瀏覽即代表同意上述規範。