重磅週年刊

AI服務的終極樣貌?聯發科技術長周漁君:手機將可以取代單眼相機

生成式AI的潛力無限,聯發科執行副總經理暨技術長周漁君受邀出席2024天下經濟論壇(CWEF)冬季場,分享未來當生成式AI從雲端走向邊緣裝置後,能夠產生什麼應用。

天下經濟論壇-CWEF-周漁君-AI-聯發科-晶片 圖片來源:王建棟攝
其他
  • 天下Web only

►►完整收錄,2024 天下經濟論壇(CWEF)冬季場 演講精華

人工智慧這個概念,過去可能被稱為機器學習、AI、DNN或CNN。

在過去十年之間,AI在終端裝置上已經有非常廣泛的使用,以聯發科自身經營的產品項目,從手機、平板、電視,一直到家裡用的智慧型助手,這些應用裡都有用到AI 。

舉例來說,監視器可以透過對臉或身體的偵測,計算現場有多少人流;或是辨識功能,像是當手機被拿起來時,可以偵測是不是用戶,藉此判定是否把螢幕打開。

另一方面,還有一個很重要的多媒體應用,因為聲音、影像呈現得好不好看、好不好聽,是非常主觀的事,通常沒辦法用純粹的訊號決定這個聲音、影像是否比較好。

所以我們就要藉由AI來訓練晶片或機器,教導這些載體什麼形式會比較受到用戶的喜歡。舉例來說,可以用AI來辨別天空、草地,然後透過色彩的加強,讓畫面變得更漂亮。這不只是應用在畫面,包括語音識別以及通訊,都能夠被使用。

拉近手機與單眼相機的距離

從2022年底開始,生成式AI無疑是最受歡迎的議題。很多人可能會好奇生成式AI在終端的應用,我就以手機最常使用的一個應用「拍照」做舉例。

手機拍照的終極追求,是能夠取代單眼相機。目前最大的兩個挑戰,一個是大光圈的情況,也就是在比較暗的場景中如何拍照。現在的手機已經能用計算的方式取代光學的不足,大家可以關注搭配天璣9300晶片的手機。

廣告

第二個挑戰是望遠鏡頭,目前除了非常旗艦級的手機,很少有做到20倍的望遠 ,因為把圖片一直放大後, 圖片的解析度逐漸不夠,顆粒就很明顯。但是現在,我們可以利用生成式AI 把這些顆粒還原成高解析度的照片,過程甚至不到一秒鐘。

「雲與端」的超級助手

未來,終端運行AI時會有三個重要指標:延遲速度(Latency)、產出量(Throughput)、複雜度(Perplexity)。這三個指標也衍生出了新的技術挑戰,包括頻寬、算力、記憶體以及電池大小。

ChatGPT、LlaMa2等大語言模型,大約是傳統AI的1000倍大,在現行的iPhone根本跑不動,只有少數高階Android手機可以運行,可見終端應用的生成式AI才剛起步。

現在大語言模型已經可以接收文字指令,未來將擴大到聲音、甚至影像,這也讓AI接收資訊的方式更接近真實人類。目前,你可以要求AI幫忙規劃個5天4夜的日本旅遊行程;但是未來,它還能幫你採取行動,例如訂飯店、訂機票。

廣告

至於不同的終端產品,也將有不同的機會與限制。以手機為例,因為體積最小,能支撐的電量最有限;但手機可以隨時連網,如果邊緣運算無法處理,隨時能尋求雲端的支援。

當然,有愈來愈多功能可以在終端裝置上單獨處理,但是想達到極致的用戶體驗,雲加端兩個混合使用,將是未來的方向。

延伸閱讀
你可能有興趣
#Shorts|光與鹽管理顧問創辦人陳淑芬:天下學習幫助我們的學員,更加進步和成長。
最新訊息
立即下載為您量身打造無廣告的閱讀環境
訂閱天下雜誌電子報

天下雜誌當期內容的精華與延伸,每周三發送最具時效性的深度內容