銀牛微電子發(fā)布高性能3D圖像和視覺處理器NU4500

5月17日，以“驅(qū)動(dòng)智能機(jī)器人創(chuàng)新”為主題的“第十四屆松山湖中國(guó)IC創(chuàng)新高峰論壇”正式在廣東東莞松山湖召開。合肥銀牛微電子有限責(zé)任公司研發(fā)副總裁周凡在論壇上推出了其最新的高性能3D圖像和視覺處理器NU4500。

3D視覺和AI是3D空間計(jì)算的關(guān)鍵技術(shù)，是智能識(shí)別、自主決策和精準(zhǔn)控制的基礎(chǔ)，應(yīng)用前景廣闊，不僅在智能制造、自動(dòng)駕駛、機(jī)器人等領(lǐng)域發(fā)揮重要作用，還將在元宇宙XR、消費(fèi)電子、物流無人機(jī)、3D掃描、虛擬數(shù)字人等前沿應(yīng)用領(lǐng)域中展現(xiàn)出巨大的潛力。周凡博士也表示，3D空間計(jì)算技術(shù)正逐步滲透到各個(gè)領(lǐng)域，徹底改變?nèi)祟惖纳罘绞胶蜕a(chǎn)方式。

目前空間計(jì)算的應(yīng)用面臨三大痛點(diǎn)：1、2D視覺已經(jīng)無法滿足日益復(fù)雜的終端應(yīng)用要求 ；2、延時(shí)大功耗大軟件化3D算法+傳統(tǒng)AI芯片或者FPGA芯片的方案不可持續(xù)。3、適用于復(fù)雜場(chǎng)景的3D感知設(shè)備價(jià)格昂貴 、多傳感器融合大幅增加系統(tǒng)成本及復(fù)雜度 單芯片解決方案 。

為了破解這三大痛點(diǎn)，銀牛微電子聚焦于3D視覺、3D雙目立體算法芯片化，并單芯片實(shí)現(xiàn)了3D+SLAM+AI，無需額外的AI芯片及激光SLAM，可以助力設(shè)備實(shí)現(xiàn)低功耗、低成本、小型化。

作為一家長(zhǎng)期深耕于3D視覺領(lǐng)域的企業(yè)，銀牛微電子總部位于合肥，并在上海、以色列、北京和深圳設(shè)立了公司和分公司。需要特別指出的是，銀牛微電子在2020年就完成對(duì)于全球知名的3D計(jì)算機(jī)視覺和圖像處理器芯片設(shè)計(jì)廠商以色列Inuitive的收購(gòu)。

Inuitive作為一家成立超10年的3D機(jī)器視覺廠商，在3D機(jī)器視覺領(lǐng)域有著深厚的技術(shù)積累，具備豐富的3D視覺、復(fù)雜SoC芯片設(shè)計(jì)、低功耗設(shè)計(jì)和邊緣AI計(jì)算經(jīng)驗(yàn)，其核心的IP都是完全自研的。Inuitive的3D深度感知圖像處理器芯片，具有強(qiáng)大的AI能力，結(jié)合SLAM實(shí)時(shí)跟蹤建圖引擎，以及通用CPU內(nèi)核與豐富的I/O接口，可以極大限度的滿足客戶的3D機(jī)器視覺產(chǎn)品開發(fā)需求，并且芯片的工作功耗也是非常的低。

在收購(gòu)Inuitive之后，2021年，銀牛微電子就推出了基于NU4000芯片的3D機(jī)器視覺模組，并在2022年推出了全新的具有3.5Tops算力的NU4100芯片，可以支持6路視頻的輸入，720P@120FPS，運(yùn)動(dòng)到顯示延遲僅1ms。2023年9月該芯片成功量產(chǎn)，并獲得了多家頭部客戶的采用。

周凡表示，銀牛微電子是目前全球唯一量產(chǎn)單芯片集成芯片化3D視覺感知、Al、SLAM模塊的SoC芯片廠商，同時(shí)也是全球唯二的3D雙目立體算法芯片化的量產(chǎn)芯片廠商。

銀牛微電子此次最新發(fā)布的NU4500，是一款高度集成的空間計(jì)算系統(tǒng)集成主控芯片，基于12nm工藝，擁有八核ARM Cortex-A55 CPU，集成了Synopsys APX5.2/NPU4K 視覺/AI處理器，可提供7.5Tops算力。同時(shí)還集成了ARC EM11D音頻DSP、高分辨率雙攝像頭ISP、H264/HEVC 視頻編碼器引肇、安全子系統(tǒng)。接口方面可支持USB3.0、Pcle-Gen4、SDIO/eMMC和LPDDR4x/5等高速接口。

NU4500還擁有基于硬件的圖像深度視覺引擎，包括領(lǐng)先的自研的深度引擎、計(jì)算機(jī)視覺加速引擎、圖像后處理模塊、異步時(shí)間扭曲(ATW）引擎等，能夠與其高性能CPU、VPU、AI和ISP內(nèi)核緊密結(jié)合，可以支持單芯片10個(gè)輸入視頻流，具備強(qiáng)大的3D空間計(jì)算功能，能夠以低功耗提供3D感知、AI和各種空間計(jì)算應(yīng)用支持。

得益于NU4500強(qiáng)大的性能，其能夠支持廣泛應(yīng)用在包括人形機(jī)器人/AMR/AGV在內(nèi)的泛機(jī)器人、 元宇宙XR、消費(fèi)電子、物流無人機(jī)3D掃描等前沿應(yīng)用領(lǐng)域。

周凡表示，目前銀牛微電子已贏得全球龍頭企業(yè)信賴，超過150客戶簽署合同或上機(jī)測(cè)試。深度合作客戶包括小米、極智嘉、Varjo 等國(guó)內(nèi)外頭部企業(yè)。

編輯：芯智訊-浪客劍