跳至主要内容

SiMa.ai 硬體文件

請使用此網站來了解 SiMa.ai MLSoC Modalix 產品的硬體設定、韌體流程和低階介面。軟體、機器學習和管線工具的說明文件將另行提供。

SiMa.ai 硬體總覽​

SiMa.ai 以晶片、模組與完整產品等形式提供 MLSoC Modalix。請從您現有或計畫採用的外形規格開始。

產品說明從這裡開始
MLSoC Modalix系統單晶片。您將它放在自行設計的電路板上。使用 SoC 開發
Modalix SoM搭載 SoC、LPDDR5 記憶體與電源的模組，可插入載板使用。使用 SoM 開發
Modalix DevKit將 Modalix SoM 安裝於載板並置於機殼內，用於評估與開發。評估 DevKit
Modalix PCIe 卡半高半長的介面卡，可為主機加入 Modalix 推論能力。PCIe 模式

若要在其中任一產品上變更系統軟體或加入相機，請參閱建置系統軟體與整合相機。

SoM 或 Chip-Down​

若要打造您自己的硬體，請在 Modalix SoM 的載板與直接搭載 SoC 的電路板之間擇一。兩者所需的設計工作、技術資料與硬體啟動流程都不相同。

Chip-down 設計載板設計
您要設計的內容搭載封裝後 Modalix SoC 的電路板，包括記憶體、電源與時脈Modalix SoM 的載板；SoM 本身已包含 SoC、LPDDR5 與電源
主要設計工作電源時序、時脈與重置、LPDDR5 佈線與調校、高速電路佈局、介面、散熱連接器腳位對應、電源供應、介面、散熱
技術資料Chip-down 設計指南、SoC 資料手冊與設計套件，簽署 NDA 後可向 SiMa.ai 取得公開的資料手冊與硬體啟動指南
軟體起點Modalix BSP，並進行板級調整Modalix BSP，並針對您的載板修改 device tree

電路板能夠開機之後，兩條路徑都使用相同的系統軟體。請參閱建置系統軟體。

關於 MLSoC Modalix​

MLSoC Modalix 是 SiMa.ai 的第二代機器學習系統晶片。它結合了一個 Arm Cortex-A65 應用處理器、一個高吞吐量的機器學習加速器 (MLA)、一個用於相機輸入的影像訊號處理器 (ISP)，以及一個用於傳統視覺工作負載的電腦視覺單元 (CVU)——所有這些都整合在單一晶片上。

此整合功能讓您可以在邊緣端執行多模態、生成式和視覺 AI 管線，而無需整合個別的加速器、主機 CPU 和相機橋接器。Modalix SoM 將 MLSoC Modalix 包裝起來，以便與載板和產品整合，並且這裡記錄的每個 DevKit 都使用相同的矽晶片。

Modalix 區塊圖，顯示 PCIe Gen5、10G 以太網、MIPI CSI2、Arm A65、ISP、CVU、視訊編解碼器、MLA、LPDDR5、NoC 和系統區塊

DevKit 產品組合​

SiMa.ai 提供基於 MLSoC Modalix 的開發套件和 PCIe 產品，適用於邊緣 AI 應用。請在下方選擇一款產品，或在表格中比較功能。

Modalix DevKit

Modalix DevKit

用於評估 MLSoC Modalix 並在 Modalix SoM 上建置應用程式的當前開發套件。

Modalix PCIe Card

Modalix PCIe 擴充卡

專為可擴展的邊緣運算系統設計的半高/半長 (HHHL) 擴充卡。

Modalix Early Access DevKit

Modalix 搶先體驗版 DevKit

為現有搶先體驗客戶提供的舊版開發套件。

功能比較​

功能Modalix DevKitModalix PCIe 擴充卡Modalix 搶先體驗版 DevKit
文件與作業系統
產品簡介 檢視 檢視 檢視
預先安裝的作業系統eLxr LinuxeLxr LinuxeLxr Linux
計算
ARM 核心8 核心 Arm Cortex-A65，時脈 1.4 GHz8 核心 Arm Cortex-A65，時脈 1.4 GHz8 核心 Arm Cortex-A65，時脈 1.4 GHz
影像訊號處理器Arm Mali-C71AE，時脈 1.2 GHzArm Mali-C71AE，時脈 1.2 GHzArm Mali-C71AE，時脈 1.2 GHz
電腦視覺單元 (CVU)Synopsys EV74，720 16 位元 GOPSSynopsys EV74，720 16 位元 GOPSSynopsys EV74，720 16 位元 GOPS
記憶體與儲存空間
記憶體大小16 GB LPDDR5（早期套件為 32 GB）8 GB 或 16 GB LPDDR564 GB LPDDR5
儲存空間16 GB eMMC，500 GB NVMe32 GB eMMC10 GB eMMC
SD 卡插槽✖✔✔
網路
乙太網路1 個 1GbE1 個 10GbE1 個 1GbE 埠（end0）、1 個 10GbE 埠（end1）、2 個 10GbE SFP+ 埠（end2/3）
相機輸入
MIPI CSI2 個 2 通道 MIPI CSI✖4 個 4 通道 MIPI CSI
透過 FAKRA 介面的 GMSL2✖兩個 GMSL2 介面，透過 FAKRA 連接。✖
輸入/輸出與顯示
GPIO / 排針40 針 GPIO 排針✖40 針 GPIO 排針
USB4 個 USB 3.2 連接埠✖✖
HDMI1 個 HDMI 1.4 埠✖✖
圖形控制器Silicon Motion SM768✖✖
視訊編解碼器
H.264/H.265 編碼器4kp604kp604kp60
MJPEG 編碼器4kp304kp304kp30
H.264/H.265 解碼器4kp604kp604kp60
AV1 和 MJPEG 解碼器4kp604kp604kp60
外形規格
連接主機的 PCIe 卡✖✔✖
立即訂購您的 DevKit

部署架構​

MLSoC Modalix 支援兩種常見的開發架構：獨立模式和 PCIe 模式。請選擇與您的硬體連接方式以及應用程式運行位置相符的架構。

在獨立模式下，一個 Modalix DevKit 或一個自訂的基於 Modalix SoM 的系統將作為一個獨立的設備運行。當設備直接從感測器、相機、儲存裝置或網路介面接收資料時，請使用此模式。

主要應用場景

  • 邊緣 AI 應用：無需依賴中央伺服器或雲端基礎架構即可執行推論。
  • 精簡部署：減少對額外主機硬體的需求。
  • 電力受限系統：支援由電池或太陽能板供電的遠端監控系統。

優點

  • 獨立運行：無需依賴主機機器即可運行。
  • 節能高效：支援對電力敏感的環境。
  • 精簡：適用於空間有限的部署環境。

典型資料流程

  1. DevKit 直接從網路介面或感測器接收資料。
  2. DevKit 會載入一個定義裝置端推論管線的 NEAT 應用程式。
  3. MLSoC Modalix 會在本機執行推論並處理資料。
  4. 結果會透過網路連線傳送到其他裝置或系統，以進行後續處理或視覺化呈現。
設定獨立模式

選擇您的路徑​

評估 DevKit

設定 Modalix DevKit 或 PCIe 卡、保持更新，並開始進行開發。

使用 SoM 開發

為 Modalix SoM 選擇載板，或自行設計並完成硬體啟動。

使用 SoC 開發

將 Modalix SoC 直接放在您自己的電路板上。

建置系統軟體

建置核心、U-Boot 與 device tree，並燒錄您自己的映像檔。

整合相機

選擇支援的 MIPI 相機、完成連接，並選擇對應的 overlay。

參考資料與下載

尋找產品簡介、資料手冊、設計指南、腳位對應表與技術說明。

已經知道您需要什麼了嗎？

開始使用​

選擇與您的設定相符的路徑。每個指南涵蓋了該模式下的序列主控台存取、網路設定和韌體管理。

快速入門指南

針對首次啟動 DevKit 的逐步互動式教學。

獨立模式

將 Modalix DevKit 或基於 Modalix SoM 的系統作為一個獨立的邊緣設備運行。

PCIe 模式

將 Modalix PCIe 卡安裝到主機中，以進行卸載推論。