Sections
ACCESS創新技術
Image Slideshow
Right Column
Text Area

自我調整單目深度處理器:視覺Transformer與ToF融合技術

Text Area

產品介紹

儘管飛行時間(ToF)與單目深度估計(MDE)技術發展迅猛,二者仍存在固有感測器局限。 本系統通過自我調整融合 ToF的精密測距能力 與 前沿單目視覺Transformer的深度先驗知識,僅需單路紅外輸入即可免去多感測器標定流程。

核心創新架構

  • 基礎模型增強
    集成基於超大規模資料集訓練的最先進單目Transformer模型,實現泛化性深度預測
  • 單感測器精簡架構
    全流程依賴紅外輸入,顯著降低硬件複雜度與對齊誤差
  •  高適應性設計
    相容MDE模型與ToF硬件的協同進化,支援嵌入式系統可擴展部署

Adaptive Monocular Depth Processor: Fusing Vision Transformer with Time-of-Flight

Text Area

技術規格

Technology Specifications

  • 系統架構
    • 核心模組: 深度融合硬件單元、8位CNN-Transformer加速器、Arm處理器(Host)
  • 雙路處理通道
    • ToF深度通道: 基於相位資訊的物理深度測量
    • ViT深度通道: 通過Transformer對強度圖進行單目深度預測
  • 自適應融合引擎
    • 局部補償機制: 利用ViT殘差數據填補ToF缺失值
    • 增量融合演算法: 採用指數衰減權重的梯度融合策略
    • 魯棒性控制: 基於ToF孔洞密度的溢出防護與置信度調節
    • 非均勻性檢測: 對ViT-ToF差異實施Sobel/Laplacian梯度分析
    • 量程一致性優化: 通過結構細化抑制雜訊與反射干擾