一度只是高階裝置專屬的沉浸式體驗,如擴增實境、高傳真遊戲與以 AI 為基礎的全新行動與家庭使用案例,目前也逐漸成為主流市場的需求。讓開發人員得以存取針對日常生活裝置優化的高效能 AI 與媒體矽智財解決方案,可以實現新的 AI 驅動使用案例,提供包括語音辨識與 always-on 能力與功能,也將不再由行動裝置所獨享。

從遊戲裝置到數位電視(DTV),人工智慧現在已經無所不在;但考量到要促成這些回應式的體驗,端點必需具備更強的運算能力。例如,數位電視的智慧型體驗,包括智慧助理語音指令、節目即時翻譯至另一種語言,以及人臉辨識以強化家長監護。

為了達成這些功能,Arm 宣布將推出兩個全新的主流 ML 處理器,以及我們最新的 Mali 繪圖與顯示處理器。這些矽智財加總起來,代表 Arm 有能力依需求調整規模,並把優質的體驗帶入消費者效率超高的日常生活裝置中。這套全新矽智財套件包括:

  • Ethos-N57 and Ethos-N37 NPUs:可實現 AI 應用並在 ML 的效能與成本、面積、頻寬與電池壽命限制之間達成平衡。
  • Mali-G57 GPU:第一個以 Valhall 架構為基礎的主流 GPU,可透過效能提升帶來沉浸式體驗
  • Mali-D37 DPU:利用最小的晶片面積達成最豐富的顯示功能組,成為入門裝置與小型顯示螢幕最適合的顯示處理器(DPU)。

Ethos-N57 與 Ethos-N37 NPUs:實現真正的異質運算
在 Arm ML 處理器 (現在稱為 Ethos-N77)發表後,Ethos-N57 與 Ethos-N37 是 Ethos NPU 家族最新的成員。Arm 的 Ethos 是一套設計用意在解決複雜 AI 與 ML 運算挑戰的產品組合,以便為日常生活裝置創造更為個人化與沉浸式的體驗。由於消費裝置愈來愈聰明,透過專屬的 ML 處理器提供額外的 AI 效能與效率,是有必要的。全新的 Ethos NPU 為針對成本與電池壽命最為敏感的設計進行優化,可以為日常生活裝置帶來優質的 AI 體驗。

Ethos-N57 與 Ethos-N37 的設計理念包括一些基本原則,例如:
  • 針對 Int8 與 Int16 資料類型的支援性進行優化
  • 先進的資料管理技術,以減少資料的移動與相關的耗電
  • 透過如創新之 Winograd 技術的落實,讓效能比許多其它 NPU 提升超過 200%

此外,Ethos-N57 的功能還包括:
  • 設計用意在提供平衡的 ML 效能與功率效率
  • 針對每秒 2 兆次運算次數的效能範圍進行優化

Ethos-N37 的功能還包括:
  • 提供了面積最小的 ML 推論處理器(小於 1 平方毫米)而設計
  • 針對每秒 1 兆次運算次數的效能範圍進行優化

Mali-G57:為普羅大眾帶來智慧與沉浸式體驗的 GPU
Mali-G57 將優質的智慧與沉浸使用者體驗帶到主流市場,包括高傳真遊戲、媲美電玩主機的行動裝置圖型效果、DTV 的 4K/8K 使用者介面,以及更為複雜的虛擬實境與擴增實境工作負荷。這是行動市場最大的市場區段,而我們最近與 Unity 的共同宣布則凸顯我們進一步優化基於 Arm 矽智財的單晶片系統(SoC)、CPU 與 GPU 效能所作的努力,它可以讓開發人員有更多的時間創造出全新的內容。

Mali-G57 關鍵功能包括:
  • 與 Mali-G52 相比,各種內容都能達到 1.3 倍的效能密度
  • 能源效率提升 30%,因此電池壽命更長
  • 針對虛擬實境(VR)提供注視點渲染支援且裝置上 ML 效能提升 60%,以便進行更複雜的實境應用

Mali-D37:Arm 單位面積效率最高的處理器
Mali-D37 DPU 在最小的可能面積上,包含了豐富顯示與效能功能。對於終端使用者而言,這意謂在面積是最重要考量的廉價裝置,如入門的智慧型手機、平板電腦與解析度在 2K 的小型顯示螢幕上,會有更佳的視覺效果與效能。

Mali-D37 關鍵功能包括:
  • 單位面積效率極高,DPU 在支援 Full HD 與 2K 解析度的組態下,16 奈米製程的面積將小於 1 平方毫米。
  • 透過從 GPU 卸下核心顯示工作以及包括 MMU-600 等記憶體管理功能,系統電力最高可節省 30%。
  • 從高階的 Mali-D71 保留關鍵的顯示功能,包括與 Assertive Display 5 結合使用後,可混合顯示高動態對比(HDR)與標準動態對比(SDR)的合成內容。

這一套全新的矽智財,從解決方案的考量而設計,符合我們完全運算(Total Compute)的方法,以確保它們確實是經驗驅動,同時針對解決明日工作負荷的複雜運算挑戰進行優化。這套全新的矽智財提供更高的單位面積效率且更為節能,同時能提升效能,並且降低成本與減少上市所需時間,為行動裝置帶來更高傳真遊戲與媲美遊戲主機的體驗,為 DTV 帶來運算複雜性,並為個人化沉浸式內容帶來更高的 ML 效能,以及消費者期待的更快反應速度。請持續關注主流領域,因為這些裝置的演進會愈來愈精彩!