5月17日，芯原主辦的“第十四屆松山湖中國IC創(chuàng)新高峰論壇”上，合肥銀牛微電子有限責(zé)任公司研發(fā)副總裁周凡表示，3D空間計(jì)算正在處于發(fā)展的高速階段，未來的3D空間計(jì)算必然會(huì)徹底改變我們的生活。

空間計(jì)算是指以空間為基礎(chǔ)，利用計(jì)算機(jī)技術(shù)進(jìn)行空間數(shù)據(jù)采集、處理、分析、模擬和可視化的計(jì)算科學(xué)。蘋果、微軟、英偉達(dá)早年就已經(jīng)發(fā)力。

周凡介紹，空間計(jì)算的應(yīng)用有一個(gè)行業(yè)共識(shí)就是2D視覺已經(jīng)很難滿足日益復(fù)雜的系統(tǒng)需求，我們需要更多的維度幫助機(jī)器人和智能設(shè)備理解，和真實(shí)世界進(jìn)行互動(dòng)，也就是從2D到3D。

3D空間計(jì)算在行業(yè)初期通用做法是用通用的GPU或FPGA實(shí)現(xiàn)軟件的3D算法，系統(tǒng)的功耗、體積都是非常大的，如果用算法，空間和幀率很難做到很高。現(xiàn)在很多的需求和系統(tǒng)應(yīng)用對(duì)系統(tǒng)幀率和分辨率非常高，這樣就很難滿足需求。對(duì)于3D空間的感知和計(jì)算需要多傳感器的融合，比如視覺、激光雷達(dá)的融合。

銀牛微電子的做法是把所有的3D算法芯片化，同時(shí)也集成了全球領(lǐng)先的3D感知處理硬件單元、AI與SLAM硬件引擎，能有效分擔(dān)系統(tǒng)算力、降低系統(tǒng)功耗和成本。

通過芯片內(nèi)建的完全可編程AI CNN引擎，銀牛自研系列芯片最高能提供3.5TOPS算力，不僅提供完整的人工智能/深度學(xué)習(xí)解決方案和算法庫，同時(shí)提供客制化人工智能算法API接口滿足客戶靈活需求相比業(yè)界通用方法將軟件算法直接運(yùn)行在系統(tǒng)處理器；通過實(shí)現(xiàn)SLAM的芯片化，銀牛自研系列芯片將SLAM流程分工到不同芯片模塊中運(yùn)行，節(jié)省了系統(tǒng)主控芯片算力。

對(duì)于銀牛微電子來說，芯片是其最大競爭力。根據(jù)周凡的介紹，銀牛是全球唯一量產(chǎn)單芯片集成芯片化3D視覺感知AI、SLAM模塊的SoC芯片，全球唯二3D雙目立體算法芯片化的量產(chǎn)芯片。

2022年，銀牛成功量產(chǎn)NU4100，該芯片產(chǎn)品采用12nm制程，F(xiàn)HD@60fps、720p@120fps，運(yùn)動(dòng)到顯示延時(shí)僅1毫秒，AI算力為3.5TOPS，功耗僅0.5～0.9W，支持6路攝像頭多傳感器融合。

根據(jù)計(jì)劃，銀牛2024年則將推出7.5TOPS的NU4500，NU4500是一款高度集成的空間計(jì)算系統(tǒng)集成主控芯片，包含豐富的硬件引擎，提供3D感知、AI和各種空間計(jì)算應(yīng)用支持。NU4500架構(gòu)具備強(qiáng)大的3D空間計(jì)算功能，與高性能 CPU、VPU、A和SP 內(nèi)核相結(jié)合，能夠以低功耗實(shí)現(xiàn)高性能3D空間計(jì)算。2025年將推出5nm的NU5000。

銀牛3D空間計(jì)算技術(shù)可支持和提供頭部、手腕、指尖等多個(gè)視覺子系統(tǒng)，并將其有機(jī)地整合在一起，從而組成人形機(jī)器人整體視覺系統(tǒng)。

據(jù)了解，銀牛微電子已經(jīng)和小米在內(nèi)的多家頭部企業(yè)以及多所全國TOP高校等150家以上企業(yè)和機(jī)構(gòu)建立合作，通過3D視覺系統(tǒng)和三維多模態(tài)大模型幫助人形機(jī)器人更好的感知、識(shí)別和理解真實(shí)物理世界，助力人形機(jī)器人銳眼識(shí)界。