聯發科展示手機、平板、汽車跨平台AI應用！讓AI幫你算數學、拍照、生成圖片

在 COMPUTEX 2024 期間，聯發科並未展示出最新的晶片與OEM 合作廠商的應用，而是展示旗艦晶片天璣9300在手機與平板電腦的各類裝置端生成式AI應用，透過內建硬體級的生成式AI引擎- 聯發科技第7代NPU，加上聯發科技提供的完整工具鏈，記憶體硬體壓縮和LoRA技術，協助開發者在裝置端快速且高效地展開多模態生成式AI應用。

印象最深刻的就是現場展示透過LoRA技術生成的即時影像，聯發科把圖庫搭配LoRA技術讓智慧型手機可以以機上 AI 的形式辨識人類的動作。類似的技術也有開源，像是變成《軒轅劍》風格的人物，目前這項技術可以在天璣8300、天璣9300 等聯發科晶片運作，辨識速度還算很快，約在 1 秒內就可以即時替換成漫畫風格。

另一個我很喜歡的生成式 AI 是生成一段音樂，只要輕鬆的在鍵盤上按下幾個音節，就可以自動生成相對應風格的音樂。

聯發科還跟我們展示了第三方合作廠商在離線狀態進行物件移除的功能，只要輕鬆點選照片，不用像是 Google 相簿一樣上雲端編輯，就可以輕易移除照片中的物體，或者進行背景生成，而透過藍心大模型，vivo 手機的藍心小V也可以在手機上讀取文件形成文件摘要，不過該項功能牽涉到用戶隱私，海外並無法使用。在教育方面則是展示了透過平板外掛鏡頭來拍攝考卷，進而可以做到 AI 改考卷，即使是數學習題也可以做到。

聯發科還展示了生成式AI服務平台MediaTek DaVinci的智慧助理服務- SAaaS (Smart Assistant as a Service )，也就是達哥。MediaTek DaVinci 智慧助理，能幫助使用者執行複雜任務，成為使用者的數位分身與其他使用者互動完成任務，提升生產力和工作效率。另外，MediaTek DaVinci也化身成為智能管家，配合聯發科技所支援的各類終端裝置，透過整合智慧物聯網提供完善的環境感知，實現多裝置間的無縫協作，構建一個全新的智慧生活型態。

至於聯發創新基地新推出的Breezper（微風細語）在活動當中也有展出，可以在不需要任何訓練的情況下，無縫結合語音辨識模型Whisper與大型語言模型MediaTek Research Breeze-7B（後略MR Breeze-7B）。Breezper得益於MR Breeze-7B優異繁體中文理解能力，長足提升Whisper語音辨識精準度，能解決中文的同音異字問題，例如「意義」與「異議」的混淆。也因大型語言模型的可命令性，可藉由提示（prompt）進一步增強語音辨識效果，加強如會議情境、指定講者、專有名詞的辨識效果，增加語音辨識系統的靈活性和可用性，是目前市面上產品未見的功能。

聯發科技Dimensity Auto還展示了全球首款3奈米智慧座艙SoC的各種應用，包括與TomTom合作打造智慧座艙，即時、智慧儀表板HMI與導航系統。與Epic Games旗下Unreal Engine合作，帶來更有彈性、互動性的車內遊戲體驗，聯發科技先進GPU支援3D汽車建模和優質HMI繪圖、多螢幕娛樂繪圖。

與Golden River Tek合作，帶來兼顧安全性的車艙娛樂體驗，聯發科技CPU支援hypervisor（虛擬管理程式下）的複數OS多工運算，將即時安全資訊相關的儀表板OS和車載資訊娛樂Android OS整合進一個SoC中，但同時結合Freedom from Interference架構，讓兩種OS運作上完全隔離，確保安全性不受影響。

展示Dimensity Auto Connect的Telematics（車載資通訊系統）及Wi-Fi實力，Telematics已從4G、5G發展到衛星通訊，聯發科技首次將AI帶入汽車平台 5G modem領域，以AI增強 5G使用情境下的資料傳輸性能，全面提升導航定位、智慧車輛管理等領域，同時展示汽車提供Wi-FI 7熱點（hotspot），帶來「有車就有網」的便捷。

現場也展示汽車上的隨身行車助手功能，透過異質運算（Heterogeneous Computing）技術，讓他的APU在裝置端執行大型語言模型（LLM），提供即時的各類邊緣生成式AI應用，搭配生態系夥伴Sensory語音輸入算法、MediaTek DaVinci的智慧行車助理，透過自然的語音互動方式提供駕駛多種服務，包括即時導航、交通狀況更新、語音控制音樂播放、車輛健康檢查提醒以及緊急情況自動求助。

聯發科還展示業界首款5G RedCap RFSoC平台T300，適用對連線效率、電池續航有著極高要求並且機構空間有限的物聯網產品，例如穿戴裝置、輕量級擴增實境裝置，以及需要持續連線的物聯網模組等。

除此之外，現場展示全球首次以低軌衛星模擬5G-Advanced NR-NTN Ku-band 衛星寬頻串流體驗。利用機器手臂模擬低軌道衛星飛行，同時搭配羅德史瓦茲低軌道衛星通道解決方案和工研院NR NTN測試基地台，為聯發科技的車載及其他多種終端裝置提供寬頻資料傳輸服務。