在AI大潮的強(qiáng)大驅(qū)使下,這兩年以語音識別為代表的智能音箱和以人臉識別為代表的智能攝像機(jī)獲得了蓬勃的發(fā)展,大批典型產(chǎn)品紛紛批量落地。在前端輕型AI計(jì)算日趨融合的背景下,北京君正推出了針對音視頻融合計(jì)算的芯片平臺——T30A。
計(jì)算是智能的基礎(chǔ)
計(jì)算是智能的基礎(chǔ),也是AI的基礎(chǔ)。君正T30A瞄準(zhǔn)的是前端輕型AI算法的落地。T30A提供一個1.2GHz主頻的CPU與一個同頻率的128位向量加速引擎,并且對8位張量計(jì)算做了定點(diǎn)優(yōu)化。在這樣的核心參數(shù)下,T30A可以給視覺算法和音頻算法提供相對較高的計(jì)算能力。同時軟件層面打包開放OpenCV/WebRTC優(yōu)化算子,開放向量引擎的底層ABI。
得益于T30A恰當(dāng)?shù)挠?jì)算能力,使得一些前端輕型AI算法具有快速、高性價比的落地可能。例如車牌識別攝像機(jī),在完成視頻的主體功能之外,T30A還可以單芯片支持低速車牌識別,目前若干廠商正在逐步落地,應(yīng)用于一般出入閘口以及停車場內(nèi)部。
與此同時,音視頻融合計(jì)算也是當(dāng)前一個主流趨勢。君正T30A是一顆專業(yè)解決音視頻融合計(jì)算的芯片平臺,具有幾個核心特點(diǎn)。首先在專業(yè)性上,君正T30具有專業(yè)的成像,視頻編碼,音頻計(jì)算等能力,其有超低碼流H.265/H.264編碼引擎,專業(yè)高品質(zhì)ISP,最高500萬分辨率,支持任意大小像素的CMOS sensor;其次在融合性方面,君正T30A一顆芯片上就能夠落地智能音頻加智能視頻應(yīng)用的產(chǎn)品,它支持?jǐn)?shù)字麥克風(fēng)陣列,可支持雙麥/三麥/四麥組合,并內(nèi)置模擬麥克風(fēng)音頻codec,可通過I2S擴(kuò)展外部音頻codec;在前端輕型AI計(jì)算能力上,T30A依然表現(xiàn)強(qiáng)勢,面向前端嵌入式AI;最后在應(yīng)用上,君正T30A不同于其他AI概念芯片,T30A有成本、功耗、工程等眾多優(yōu)勢,產(chǎn)品非常容易落地。T30A的超低運(yùn)行功耗,最低至300mW,還支持屏幕顯示和快速開機(jī),冷啟動可于一秒內(nèi)完成。
專業(yè)的視頻能力
T30A的基礎(chǔ)是一顆專業(yè)的視頻處理芯片。其內(nèi)置高品質(zhì)的ISP可以支持3A/3D-NR,支持WDR,微光夜視和全彩。T30A支持H.265/H.264編碼,H.265是目前效率最高的編碼方式之一,配合各種碼流控制方法,就可以給多種應(yīng)用場景提供最恰當(dāng)?shù)囊曨l輸出,從極高品質(zhì),到運(yùn)動攝錄,到網(wǎng)絡(luò)傳輸,再到多碼流同時輸出均可以支持。
T30A最高可以支持500萬分辨率的sensor輸入,同樣最高500萬分辨率的視頻處理。這樣極高清的分辨率,為各類應(yīng)用提供了廣泛的視頻接入選擇。從玩具級輕視頻的1M分辨率,到2K*2K的高清魚眼;從3u像素的專業(yè)安防,到1.4u的移動攝錄,均可以支持。
創(chuàng)新的音頻能力
目前業(yè)內(nèi)的視頻處理器芯片,音頻功能普遍較弱。君正T30A創(chuàng)新性地對音頻能力做了定向增強(qiáng)。以視頻為中心,是君正T30A音視頻融合計(jì)算的基礎(chǔ)。專業(yè)的視頻處理能力,為單純的音頻智能插上了強(qiáng)大的翅膀。
T30A首先創(chuàng)新性地集成了數(shù)字麥克風(fēng)陣列接口,可以支持雙麥/三麥/四麥等多種陣列組合方式?;跀?shù)字麥克風(fēng)陣列,就可以使T30A獲得接近最近非常火爆的“小愛同學(xué)”、“天貓精靈”等音箱產(chǎn)品的語音能力。君正聯(lián)合了業(yè)內(nèi)多家知名的語音算法供應(yīng)商,把DOA,NR,AEC,Beamforming,De-Reverbration等整合到位,直接提供“搖頭機(jī)聲源定位”“命令詞控制”等功能。
T30A中包含音頻codec,并且可以通過I2S接口擴(kuò)展越級的音頻codec,來達(dá)到發(fā)燒級的音頻品質(zhì)。
從這些獨(dú)特的特性來看,君正T30A無疑是音頻潛力很強(qiáng)的專業(yè)視頻處理器?;谶@些能力,一系列需要視頻與音頻融合的產(chǎn)品呼之欲出。例如語音識別攝像機(jī),在原來智能攝像機(jī)的基礎(chǔ)上增加語音命令,聲源跟蹤等功能。另外像目前若干品牌正在研發(fā)的教育機(jī)器人和兒童故事機(jī),則是在原來純音頻的功能上增加遠(yuǎn)程視頻能力,使得產(chǎn)品躍升一個級別。
創(chuàng)新差異化撬動智能視頻大市場
除了音頻之外,T30A在經(jīng)典攝像機(jī)的基礎(chǔ)上,還增加了另外一系列有趣的差異化創(chuàng)新。為廣闊的泛視頻市場提供一個通用型的視頻處理平臺。
T30A配套標(biāo)準(zhǔn)UVC/UAC協(xié)議集,配合H.265可以打造全新的高階USB攝像頭。由于USB的通用性,USB攝像頭不僅可以接入PC即插即用,也可以接入機(jī)頂盒,Android/iOS設(shè)備作為增強(qiáng)的視頻輸入設(shè)備。
另外,屏幕顯示,一秒以內(nèi)的快速啟動,低至300mW的視頻運(yùn)行功耗,這些特點(diǎn)為創(chuàng)新產(chǎn)品,跨界產(chǎn)品提供了超越想象的可能。例如交互式攝像機(jī),快速啟動的攝錄產(chǎn)品,移動攝錄,網(wǎng)絡(luò)視頻會議終端,都可以在T30A的平臺上開花結(jié)果。
君正T30A是第一個音視頻融合計(jì)算芯片,為廣闊的泛視頻市場提供了一個全面型的通用型的視頻處理平臺。以音視頻融合為中心,以前端輕型AI計(jì)算為目標(biāo),君正T30A可以覆蓋多種應(yīng)用產(chǎn)品。綜合看來,在車牌識別攝像機(jī)、語音識別攝像機(jī)、屏幕交互攝像機(jī)、教育機(jī)器人、兒童故事機(jī)、USB攝像頭、視頻會議終端等產(chǎn)品和領(lǐng)域上,君正T30A都將大有作為。
上一篇:云知聲獲1億美金C輪融資,即將推出AI芯片
下一篇:電流傳感器芯片供應(yīng)商“興工微”獲一村資本千萬投資原創(chuàng)
推薦閱讀
史海拾趣
作為一家技術(shù)驅(qū)動的公司,EPC公司一直致力于持續(xù)創(chuàng)新和產(chǎn)品研發(fā)。近年來,公司不斷推出新的氮化鎵功率半導(dǎo)體器件和集成電路產(chǎn)品,以滿足市場不斷變化的需求。其中,EPC公司全新推出的ePower功率級集成電路系列,為高功率密度應(yīng)用提供了更高性能及更小型化的解決方案。這一系列產(chǎn)品在市場上獲得了良好的反響,進(jìn)一步鞏固了EPC公司在氮化鎵技術(shù)領(lǐng)域的領(lǐng)先地位。
Renesas Electronics的前身可以追溯到1958年,當(dāng)時日立制作所成立了半導(dǎo)體部門。隨著技術(shù)的不斷進(jìn)步和市場的擴(kuò)大,該部門逐漸發(fā)展壯大,成為日立公司內(nèi)的一個重要業(yè)務(wù)部門。進(jìn)入20世紀(jì)90年代,隨著半導(dǎo)體市場的競爭加劇,日立公司決定將半導(dǎo)體業(yè)務(wù)獨(dú)立出來,以便更加靈活地應(yīng)對市場變化。1999年,日立半導(dǎo)體部門正式更名為ELANTEC,開始了獨(dú)立發(fā)展的道路。
隨著全球化趨勢的加速,Datatronic公司開始將目光投向國際市場。公司通過參加國際展覽、設(shè)立海外辦事處等方式,積極拓展海外市場。同時,公司還加強(qiáng)了與國際企業(yè)的合作,引進(jìn)先進(jìn)的技術(shù)和管理經(jīng)驗(yàn)。這些努力使得Datatronic公司在國際市場上逐漸獲得了認(rèn)可,品牌影響力得到了提升。
Bedford Opto公司在追求經(jīng)濟(jì)效益的同時,也積極履行社會責(zé)任。公司注重環(huán)保和可持續(xù)發(fā)展,致力于減少生產(chǎn)過程中的污染和能耗。同時,公司還積極參與公益事業(yè),為社會做出積極貢獻(xiàn)。
2020年,Cypress迎來了其發(fā)展歷程中的一個重要時刻——與德國半導(dǎo)體巨頭英飛凌(Infineon)的合并。這次合并使Cypress成為英飛凌的一部分,雙方在技術(shù)、市場和資源等方面實(shí)現(xiàn)了互補(bǔ)和整合。這次合并不僅增強(qiáng)了Cypress在全球半導(dǎo)體市場的競爭力,也為其未來的發(fā)展提供了更廣闊的空間。
以上故事均基于Cypress Semiconductor(賽普拉斯半導(dǎo)體)的發(fā)展歷史而創(chuàng)作,旨在客觀描述公司在電子行業(yè)中的發(fā)展歷程和成就。
1913年,卡爾·斐德利希·拉普(Karl Friedrich Rapp)與古斯塔夫·奧圖(Gustav Otto,是尼可勞斯·奧古斯特·奧圖Nikolaus August Otto即著名的四沖程奧圖循環(huán)汽油發(fā)動機(jī)的發(fā)明者的兒子)分別建立了兩個飛機(jī)制造廠,這卻成了 ...… 查看全部問答∨ |
|
PB5.0升級2008全年升級包后 定制內(nèi)核 生成的NK.nb0無法運(yùn)行 第一步:把PB5.0升級2008全年升級包,在優(yōu)龍2410開發(fā)板資料提供的ARMSYS2410.pbxml基礎(chǔ)上把.net compact framework 2.0 add to OS,編譯通過,生成的NK.nb0(大小為29M),在DNW下可以通過USB下載到開發(fā)板,下載地址為0X30200000,下載后選擇Y運(yùn)行, ...… 查看全部問答∨ |
|
美資企業(yè)招賢納士Driver development engineer(SW 4#) 公司名稱: Carrier Access 公司網(wǎng)址: http://www.carrieraccess.com 電子郵箱: lshi@carrieraccess.com,簡歷請注明信息出處 工作地點(diǎn): 上海 外語要求: 英文良好 簡歷接收方式: 英文及中文 學(xué)歷: 本科以上 職位描述: RESPONSIBILITIES: ...… 查看全部問答∨ |
|
【連載】【ALIENTEK MiniSTM32 開發(fā)板】STM32不完全手冊--OLED顯示實(shí)驗(yàn)(實(shí)驗(yàn)九) 注意,現(xiàn)在我們的OLED模塊已經(jīng)有三種可選:雙色,純藍(lán)色,純白色。詳情見我的店鋪:http://shop62103354.taobao.com/ OLED視頻地址:http://v.youku.com/v_show/id_XMjAwMjQwMDcy.html 開發(fā)板購買,在 ...… 查看全部問答∨ |
|
驅(qū)動三相步進(jìn)電機(jī)用啥驅(qū)動芯片好呢? 因?yàn)橐?qū)動大中功率的步進(jìn)電機(jī),所以不能用L298之類 網(wǎng)上兩相的專用驅(qū)動芯片比較多,沒搜著三相的,哪位大蝦支支招啊… 查看全部問答∨ |
- 全域800V架構(gòu):在行業(yè)亂象的荊棘中的花朵
- 納芯微推出全新第三代汽車級數(shù)字隔離器系列
- 插混,“突圍”歐洲車市
- 機(jī)器人行業(yè)周報(bào)|5月20日:華為優(yōu)必選深度聯(lián)手,人形機(jī)器人走“科技紅毯”等
- 超快充爆發(fā),汽車電池安全怎么辦?
- 數(shù)字化,高性能激光雷達(dá)爭奪戰(zhàn)的核武器
- L3+智能座艙時代 主機(jī)廠三大核心需求揭秘
- 從機(jī)械應(yīng)答到深度交互 移遠(yuǎn)通信如何讓機(jī)器人 靈魂覺醒
- 寶馬全固態(tài)電池電動汽車上路測試,續(xù)航有望大幅提升
- CIS、ISP、AI三重加持下,視覺智駕方案終于成熟了
- PI 電源小課堂|無 DC-DC 變換實(shí)現(xiàn)多路高精度輸出反激電源
- 村田感恩季:這份電子元器件使用攻略已備好,速來闖關(guān)!
- 深入東芝參考設(shè)計(jì)庫:夯實(shí)您的設(shè)計(jì)庫,讓您的設(shè)計(jì)更出彩
- 圍讀 《嵌入式軟件的時間分析》——汽車行業(yè)領(lǐng)域的嵌入式軟件理論、分析及實(shí)踐
- 直播已結(jié)束【大唐恩智浦具有阻抗檢測功能的新能源鋰電芯電池管理方案】
- 泰克示波器,朝第二個百萬臺銷售紀(jì)錄前進(jìn)!
- 省錢、省心的購買租賃方案,讓您不再為預(yù)算煩惱!
- 安全在任何時候都是第一要素,你的嵌入式設(shè)計(jì)也是!誠邀參加英飛凌 OPTIGA™ Trust M 安全防御大揭秘!
- 是德感恩月|天天抽示波器,推薦同享,百余份禮品等你拿!
- TC74HC4514AP 4到16線解碼器
- 深度學(xué)習(xí)領(lǐng)域引用最多的20篇論文,建議收藏!
- 電阻R的作用
- 求本書 the indispensable pc hardware book 哪有啊 找了半天了謝謝各位大大了
- 嵌入式Linux開發(fā)公益體驗(yàn)活動介紹(5月16號本周六)
- 深圳聲學(xué)工程師崗位分享,歡迎推薦、自薦
- EEWORLD大學(xué)堂----為您的應(yīng)用選擇最佳ADC架構(gòu)
- 【MSP430共享】大家一起DIY一塊MSP430開發(fā)板
- 電源設(shè)計(jì)太復(fù)雜?快來看視頻學(xué)習(xí)如何用WEBENCH輕松實(shí)現(xiàn)電源設(shè)計(jì)
- TI的圖形庫