銀牛微電子發(fā)布高性能3D圖像和視覺處理器NU4500
5月17日,以“驅(qū)動智能機器人創(chuàng)新”為主題的“第十四屆松山湖中國IC創(chuàng)新高峰論壇”正式在廣東東莞松山湖召開。合肥銀牛微電子有限責(zé)任公司研發(fā)副總裁周凡在論壇上推出了其最新的高性能3D圖像和視覺處理器NU4500。
3D視覺和AI是3D空間計算的關(guān)鍵技術(shù),是智能識別、自主決策和精準控制的基礎(chǔ),應(yīng)用前景廣闊,不僅在智能制造、自動駕駛、機器人等領(lǐng)域發(fā)揮重要作用,還將在元宇宙XR、消費電子、物流無人機、3D掃描、虛擬數(shù)字人等前沿應(yīng)用領(lǐng)域中展現(xiàn)出巨大的潛力。周凡博士也表示,3D空間計算技術(shù)正逐步滲透到各個領(lǐng)域,徹底改變?nèi)祟惖纳罘绞胶蜕a(chǎn)方式。
目前空間計算的應(yīng)用面臨三大痛點:1、2D視覺已經(jīng)無法滿足日益復(fù)雜的終端應(yīng)用要求 ;2、延時大功耗大軟件化3D算法+傳統(tǒng)AI芯片或者FPGA芯片的方案不可持續(xù)。3、適用于復(fù)雜場景的3D感知設(shè)備價格昂貴 、多傳感器融合大幅增加系統(tǒng)成本及復(fù)雜度 單芯片解決方案 。
為了破解這三大痛點,銀牛微電子聚焦于3D視覺、3D雙目立體算法芯片化,并單芯片實現(xiàn)了3D+SLAM+AI,無需額外的AI芯片及激光SLAM,可以助力設(shè)備實現(xiàn)低功耗、低成本、小型化。
作為一家長期深耕于3D視覺領(lǐng)域的企業(yè),銀牛微電子總部位于合肥,并在上海、以色列、北京和深圳設(shè)立了公司和分公司。需要特別指出的是,銀牛微電子在2020年就完成對于全球知名的3D計算機視覺和圖像處理器芯片設(shè)計廠商以色列Inuitive的收購。
Inuitive作為一家成立超10年的3D機器視覺廠商,在3D機器視覺領(lǐng)域有著深厚的技術(shù)積累,具備豐富的3D視覺、復(fù)雜SoC芯片設(shè)計、低功耗設(shè)計和邊緣AI計算經(jīng)驗,其核心的IP都是完全自研的。Inuitive的3D深度感知圖像處理器芯片,具有強大的AI能力,結(jié)合SLAM實時跟蹤建圖引擎,以及通用CPU內(nèi)核與豐富的I/O接口,可以極大限度的滿足客戶的3D機器視覺產(chǎn)品開發(fā)需求,并且芯片的工作功耗也是非常的低。
在收購Inuitive之后,2021年,銀牛微電子就推出了基于NU4000芯片的3D機器視覺模組,并在2022年推出了全新的具有3.5Tops算力的NU4100芯片,可以支持6路視頻的輸入,720P@120FPS,運動到顯示延遲僅1ms。2023年9月該芯片成功量產(chǎn),并獲得了多家頭部客戶的采用。
周凡表示,銀牛微電子是目前全球唯一量產(chǎn)單芯片集成芯片化3D視覺感知、Al、SLAM模塊的SoC芯片廠商,同時也是全球唯二的3D雙目立體算法芯片化的量產(chǎn)芯片廠商。
銀牛微電子此次最新發(fā)布的NU4500,是一款高度集成的空間計算系統(tǒng)集成主控芯片,基于12nm工藝,擁有八核ARM Cortex-A55 CPU,集成了Synopsys APX5.2/NPU4K 視覺/AI處理器,可提供7.5Tops算力。同時還集成了ARC EM11D音頻DSP、高分辨率雙攝像頭ISP、H264/HEVC 視頻編碼器引肇、安全子系統(tǒng)。接口方面可支持USB3.0、Pcle-Gen4、SDIO/eMMC和LPDDR4x/5等高速接口。
NU4500還擁有基于硬件的圖像深度視覺引擎,包括領(lǐng)先的自研的深度引擎、計算機視覺加速引擎、圖像后處理模塊、異步時間扭曲(ATW)引擎等,能夠與其高性能CPU、VPU、AI和ISP內(nèi)核緊密結(jié)合,可以支持單芯片10個輸入視頻流,具備強大的3D空間計算功能,能夠以低功耗提供3D感知、AI和各種空間計算應(yīng)用支持。
得益于NU4500強大的性能,其能夠支持廣泛應(yīng)用在包括人形機器人/AMR/AGV在內(nèi)的泛機器人、 元宇宙XR、消費電子、物流無人機3D掃描等前沿應(yīng)用領(lǐng)域。
周凡表示,目前銀牛微電子已贏得全球龍頭企業(yè)信賴,超過150客戶簽署合同或上機測試。深度合作客戶包括小米、極智嘉、Varjo 等國內(nèi)外頭部企業(yè)。
編輯:芯智訊-浪客劍
*博客內(nèi)容為網(wǎng)友個人發(fā)布,僅代表博主個人觀點,如有侵權(quán)請聯(lián)系工作人員刪除。