為旌科技成立于2020年8月,是國內頂尖的集成電路設計企業,擁有強大的圖像處理能力和高能效的人工智能核心,能夠提供優質的圖像質量,并支撐復雜的AI計算場景覆蓋智慧視覺和智能駕駛領域,全面支持客戶在不同細分領域的芯片選型。
2024年4月17日,在第二屆汽車人工智能大會上,上海為旌科技副總裁amp;聯合創始人張曉峰談到,在智能駕駛方面,已推出為旌御行系列行泊一體域控芯片VS919、VS919L、VS909,以高度集成、高性能、低功耗等特點為客戶提供單芯片智能駕駛解決方案。產品內部集成ASIL-D級安全島,同時提供整體的autosar解決方案。通過自研ISP支持高動態、全域降噪等需求,滿足低光、強光及各種氣象條件下圖像還原,降低機器推理難度;自研高效能NPU和工具鏈,采用近存計算、亂序執行、多隊列、多維度融合等先進技術,得到傳統GPU計算數倍的有效算力,提供高質量解決方案的同時,降低了用戶整體系統成本、研發成本和研發周期。
上海為旌科技副總裁amp;聯合創始人
以下為演講內容整理:
公司發展歷程
為旌是一家專注于芯片研發與制造的企業,在座的嘉賓多為我們的上下游合作伙伴或業界同仁。自2020年8月成立以來,我們始終致力于技術創新與產品研發。2021年,我們成功啟動了首個智慧視覺芯片項目,2022年實現了流片并一版成功,并于年底獲得了首個客戶訂單,這標志著我們初步在市場中取得了認可。
圖源:為旌科技
同年,我們進一步拓展了產品線,推出了智能駕駛芯片VS9系列。在研發過程中,我們同步開展了車規、以及ISO26262功能安全體系的建設工作,以確保產品符合行業標準。首顆車規芯片回片后,我們立即啟動了AEC-Q100認證流程,并于2022年年底完成了某車企方案商的design in。
2023年,我們在北京隆重發布了智慧視覺旌海山系列芯片,其圖像質量達到了業內領先水平。在智能駕駛領域,我們于2023年7月份通過了ISO26262體系認證,并在11月份成功獲得了首顆車規芯片的AEC-Q100認證。同年12月,我們發布了為旌御行VS919系列芯片,并在本周一獲得了VS919系列芯片的ISO26262功能安全產品ASIL-D認證,這進一步鞏固了我們在行業內的領先地位。
VS919:國內首顆極致性價比的單芯片行泊一體
VS919芯片作為我們主打產品,以其極致性價比和行泊一體方案受到了市場的廣泛關注。該芯片集成了滿足ASIL-D等級的安全島MCU,擁有8核A55、4核R5F以及兩個支持96G算力的DSP。此外,我們還自研了24T算力的NPU,并對Transformer進行了加速處理。雙核GPU的算力高達80G,支持3D渲染,確保了強大的圖像處理能力。
在接入能力方面,VS919芯片同樣表現出色,總接入能力達到3200萬像素,可支持多達16路200萬像素的輸入,同時兼容12CAN-FD以及其他常用外設接口如PCIE、USB等。
值得一提的是,我們還自研了寬動態范圍達到140dB的為旌遙光ISP,有效解決了車載視覺系統在復雜環境下的可見性問題。此外,智能編碼模塊支持H.264、H.265等多種編碼格式,具備4K120fps的編解碼能力,滿足了高清視頻處理的需求。
關于VS919單芯片行泊一體域控方案,我們采用了先進的傳感器技術,支持5R7V12U等多種傳感器接入方式。通過can接口接入5路毫米波雷達,通過SPI、GPIO接口接入12路超聲波雷達,實現了全方位的環境感知。同時,我們還提供了豐富的車載以太網接口,支持與其他車載設備的連接與通信。
在軟件方面,我們搭建了符合ISO26262:2018ASIL-D標準的嵌入式軟件開發流程,并采用V模型覆蓋整個設計和測試過程。我們定義了嚴格的編譯規范、設計方法和驗證標準,并提供了一套完整的滿足ASIL-D等級的開發工具鏈。這些措施確保了軟件開發的高效性和可靠性。
此外,我們還對車載軟件部署進行了深入研究,提出了基于硬件算力單元的軟件架構方案。我們主要在大核上部署SDK,并對接三方中間件,為客戶提供了靈活的算法部署空間。同時,我們注重安全島的建設,提供了ASIL-D等級的安全島以及相應的操作系統和中間件支持。
在整體軟件架構方面,我們實現了從AI算法到APP的全方位覆蓋,并整合了雷達、毫米波等多種傳感器數據。通過中間件實現通信管理、時間同步等功能,并通過硬件以太網支持DDS等通信協議。我們為客戶提供了一系列軟件庫和工具,包括媒體處理、AI部署、DSP API以及圖形渲染等方面的支持。
為旌科技的實踐探索
目前,我們在MCU中內置了ASIL-D級別的安全島,并提供了相應的API和CP協議棧支持。客戶可以通過這些接口輕松調用我們的應用和服務。我們期待與更多的AUTOSAR合作伙伴攜手共進,實現共贏發展。
現將我們構建的數據通道圖展示如下:圖中左側支持兩個800萬像素的通道,輔以四條200萬像素的環視通道,并增設一條300萬像素的后視通道。
圖源:為旌科技
在BEV模式下,四路環視信號需與前視信號保持同步時間戳,以便將相關信息傳遞至NPU進行BEV處理。若僅執行泊車功能,則需進行圖像拼接。拼接算法部署于GPU上,,GPU執行拼接與渲染操作后,最終由VO負責顯示。
值得一提的是,我們支持BEV+Transformer架構,提供高度靈活且可編程的算子支持。目前,我們已支持200多個算子硬件加速,支持混合精度量化等功能,能夠有效支持Transformer模型的加速運算。
此外,我們還通過OBU模塊支持可定義算子的實現。,經實際芯片評測,我們在CNN上的性能達到友商的1.5倍,而在SwinT上的性能更是友商的6倍。
我們的為旌星圖工具鏈核心包含兩部分:量化工具與精度評估工具通過工具鏈轉化后,我們獲得量化參數表與浮點部署模型。隨后,利用編譯器與性能評估工具進行優化處理,包括圖優化、算子拆分與融合,以及與硬件直接相關的算子融合。最終將模型轉換為硬件可識別的模型與指令,并通過我們的部署流程直接加載至芯片上。
圖示為Yolov5在VS919芯片上的量化部署,芯片連接7個攝像頭。顯示器頂部為兩個主攝,中間一排為環視攝像頭,底部為后視攝像頭。所有攝像頭均朝向同一方向,充分展示7V的能力。在SwinT量化部署方面,我們首先進行模型準備與清洗工作,隨后根據數據集類型選擇相應的量化方法。經過模型量化后,生成中間量化文件,并利用我們的量化工具進行處理。最終,通過編譯工具生成芯片可識別的文件,并通過部署流程加載至芯片上。目前,我們在性能上已達到競品的6倍。
圖源:為旌科技
展望未來,我們堅信合作共贏是發展的關鍵。作為旌科技這家專注于芯片研發的公司,我們致力于打造好用、易用、耐用的芯片產品,在算力底座方面發揮我們的專長。我們期待與更多的合作伙伴,包括中間件合作伙伴與算法合作伙伴,共同打造國產智能駕駛方案。
聲明:本網轉發此文章,旨在為讀者提供更多信息資訊,所涉內容不構成投資、消費建議。文章事實如有疑問,請與有關方核實,文章觀點非本網觀點,僅供讀者參考。
猜你喜歡
-
游客在進入北京環球度假區時須核驗北京健康
具體如下:北京環球度假區繼續按照相關政府部門的限流要求,以預約入園的形式加強人流動態監測和...詳情
2022-04-28
-
南非徐霞客在云南:從行萬里路到吃百碗米線
題:南非徐霞客在云南:從行萬里路到吃百碗米線的文化之旅杜安睿來自南非,是一名國際注冊會計師...詳情
2022-04-10
-
廣州新增3例本土確診病例雙層觀光巴士全部
廣州新增3例本土確診病例雙層觀光巴士全部停運廣州市政府新聞辦公室21日公布的信息顯示,過去...詳情
2022-03-22
-
北京環球度假區將開啟環球中國年在表演隊伍
北京環球度假區將開啟環球中國年北京青年報記者從北京環球度假區獲悉,2022年1月22日至2...詳情
2022-01-17