意法半導體以STM32微控制器整合NPU加速器,協助邊緣人工智慧開發 智慧應用 影音
DForum0116
DForum0115

意法半導體以STM32微控制器整合NPU加速器,協助邊緣人工智慧開發

  • 賴品如台北

意法半導體(STMicroelectronics;ST)推出首次整合機器學習(ML)加速器的新系列微控制器,讓嵌入式人工智慧(AI)真正地發揮優勢,讓著重成本和功耗的消費性電子和工業產品能夠運行電腦視覺、音訊處理、聲音分析等演算法,提供以前小型嵌入式系統無法達到的高階功能。

STM32N6系列微控制器(MCU)是意法半導體迄今為止處理效能最強的產品,也是首款嵌入意法半導體自研神經網路處理單元(NPU)Neural-ART Accelerator的微控制器,其機器學習處理效能是STM32 MCU現有高階產品的600倍。自2023年10月開始,STM32N6已供貨給指定客戶,現已準備好大量供貨。

意法半導體微控制器、數位 IC 和 射頻產品部(MDRF)總裁Remi El-Ouazzane表示:「微型邊緣裝置市場將迎來巨大的轉變,愈來愈多的裝置採用AI模型提升客戶產品的效能或接替部分的工作。這些模型目前用於分段、分類和辨識等任務,未來將進入尚未開發的新應用領域。STM32N6是首款採用我們自研發之Neural-ART Accelerator NPU的STM32產品,而自主開發的AI 軟體生態系統包的最新版本也將支援STM32N6,這是STM32搭載AI硬體加速器漫長發展之旅的開端,它將實現任何其他嵌入式處理解決方案都無法達到的產品應用創新。」

Yole Group記憶體和運算部首席分析師Tom Hackenberg進一步表示,「人們普遍認為AI是一個大型資料中心,而且是一種非常耗電的應用。這在,這已經不再是事實,現今的物聯網邊緣應用迫切需要 AI分析能力,整合微控制器的高效能處理能力與 AI分析能力是一個新趨勢,而STM32N6是代表這種趨勢的一個絕佳的範例,能處理電腦視覺和大量感測器驅動的應用,大幅節省現代裝置的擁有成本。」

STM32N6客戶使用評價

LG是一家跨國公司,以電子、化學和通訊產品而聞名,主營產品包括智慧型手機、家電和電視。LG電子CTO部門研發任務負責人Yehan Ahn表示「STM32N6具備十分出色 AI處理效能和靈活性,其小型的矽封裝適用於嵌入式系統和穿戴式裝置。而採用突破性之Neural-ART Accelerator讓這款微控制器的推論速度超出了我們的預期,此外,ST友善的開發軟體工具也讓我們能夠將AI模型無縫整合至MCU內。」

聯想研究院是聯想的創新和研究部門,專注於開發人工智慧、大數據、雲端運算和智慧裝置等尖端技術和解決方案。聯想研究院首席研究員川野誠一表示「我們在實驗室對ST最新的STM32N6微控制器進行了嚴格的評測,注意到其出色的神經網路處理效能和功率效率,這款微控制器代表著一個新時代的開始,加速了我們對於「AI for Al」l的研究。」

Alps Alpine是一家生產電子裝置、車用資訊娛樂系統和通訊裝置的跨國公司。Alps Alpine資深專案負責人Fuchs表示:「STM32N6新系列微控制器適用於我們創新自行車相關產品的理想選擇。Neural-ART加速器的速度和效能,加上廣泛週邊裝置的擴充性,讓我們可以創造出精巧的裝置,執行許多以感測器為基礎的AI推論,並提供多元化和強化的使用者體驗。」

Carlo Gavazzi為全球建築和工業自動化市場設計和製造電子控制元件。Carlo Gavazzi研發專案負責人Allan Skou Thomsen表示:「STM32N6 是我們最新感測器專案缺失的一塊拼圖。在看到Neural-ART Accelerator後,啟發我們使用 AI解決一些挑戰,這是在概念化階段所沒有想到的。這款產品還有許多其他強大的功能,包括MIPI-CSI Raw12介面和Arm Cortex-M55內核心,結合這兩者所提供在鏡頭和反應時間的能力是其他值得信賴之品牌無法提供的。這項最新的高品質技術對於我們開發未來高效能工業感測器至關重要。」

Meta-bounds是消費級AR眼鏡產業一家領先的創新公司。Meta-bounds創始合夥人周星表示:「STM32N6具備高效能、高效能和先進功能,是一款適合我們產品的突破性微控制器。其嵌入式Neural-ART Accelerator、加強型相機介面和專用影像訊號處理器(ISP)讓我們能夠為市場提供輕量、小尺寸、功能吸引人的產品,提升使用者體驗的同時還不影響電池續航時間。意法半導體的技術支援讓我們的開發過程非常順利,對於像我們這樣希望透過尖端AI和圖形功能來加強穿戴式技術價值的公司來說,這是非常重要的。」

Autotrak為汽車市場提供一流的車隊管理和失竊車輛追回解決方案。Autotrak工程總監Gavin Leask表示:「在南非的卡車運輸產業,約60%的致命事故歸咎於疲勞駕駛。STM32N6可以降低這些意外數量。透過在車輛內導入快速高效的AI推論,我們可以即時發聲警示駕駛,預防事故,挽救生命。」

AI開發的技術功能與支援:

機器學習處理效能是高階STM32 MCU的600倍:ST Neural-ART加速器包含近300個可配置的乘法累加元件,運算速度高達每秒600 GOPS次運算(GOPS;每秒null億次運算)。

現今功能最強大的STM32:STM32N6搭載一顆800 MHz的Arm Cortex-M55內核心,CoreMark測試成績達到前所未有的3,360分。這款MCU還提供無Neural-ART加速器的版本,適用於需要STM32N6的所有效能、介面和功能,但無需整合進階AI演算法的應用。

4.2 MB RAM,STM32搭載有史以來最大的記憶體容量:提供記憶體以支援資料密集的AI和多媒體運作負載。兩個64位元AXI提供高頻寬,以維持最高運算速率,並釋放Neural-ART加速器的全部功能。

首次在MCU上採用先進影像訊號處理器(ISP):STM32N6整合一個可以直接處理影像訊號的ISP元件,提供應用使用簡單且價格親民的影像感測器。除此之外,還可使用ST免費的ISP IQTune軟體(STM32-ISP-IQTune)進行設定。該軟體是一款先進工具,可以自訂曝光時間、對比度或色彩平衡等影像訊號處理參數。

ST Edge AI Suite套件的支援:為開發邊緣機器學習應用提供全套軟體工具,包括導入開發者自行開發的TensorFlow Lite、Keras、ONNX等格式的模型。

新系列微控制器現支援的AI模型庫的規模愈來愈大,為各種應用帶來更強大的效能和多功能性。使用者可以探索不斷擴充的AI模型庫,提升專案品質,取得最佳效果並縮短上市時間。更多技術資訊,歡迎瀏覽意法半導體官方網站了解更多。