ZHCADU3A February 2024 – November 2024 AM62A1-Q1 , AM62A3 , AM62A3-Q1 , AM62A7 , AM62A7-Q1 , AM62P , AM62P-Q1 , DS90UB953A-Q1 , DS90UB960-Q1 , TDES960 , TSER953
3.2 圖像流水線軟件架構
AM6x Linux SDK 提供了 GStreamer (GST) 框架，該框架可用于用戶空間，以便集成各種應用的圖像處理組件。SoC 上的硬件加速器 (HWA)，例如視覺預處理加速器 (VPAC) 或 ISP、視頻編碼器和解碼器以及深度學習計算引擎，可通過 GST 插件進行訪問。VPAC (ISP) 具有多個模塊，包括視覺成像子系統 (VISS)、鏡頭失真校正 (LDC) 和多標量 (MSC)，每個模塊對應一個 GST 插件。
圖 3-2 展示了從攝像頭到 AM62A 上編碼或深度學習應用的典型圖像流水線方框圖。有關端到端數據流的更多詳細信息，請參閱 EdgeAI SDK 文檔。
圖 3-2 使用 GStreamer 的典型 AM62A 圖像流水線對于 AM62P，圖像流水線更簡單，因為 AM62P 上沒有 ISP。
圖 3-3 使用 GStreamer 的典型 AM62P 圖像流水線借助為每個攝像頭創建的視頻節點，基于 GStreamer 的圖像流水線允許同時處理多個攝像頭輸入。多個攝像頭可以相同，也可以不同。對于 AM62A，ISP 會逐幀重新配置以處理來自每個已連接攝像頭的圖像。下一章將介紹使用 GStreamer 打造多攝像頭應用的參考設計。