2024年2月27日,中國(guó)上海——領(lǐng)先的神經(jīng)擬態(tài)視覺(jué)傳感公司 Prophesee 今日宣布,與高通技術(shù)公司的合作進(jìn)入可量產(chǎn)階段。在巴塞羅那世界移動(dòng)通信大會(huì)(MWC)期間,Prophesee 展示了其解決方案與驍龍?旗艦移動(dòng)平臺(tái)的原生兼容性,以及神經(jīng)擬態(tài)視覺(jué)技術(shù)為智能手機(jī)攝像頭帶來(lái)的速度、能效和成像質(zhì)量方面的提升。
圖 1: 高通在驍龍峰會(huì)主會(huì)場(chǎng)介紹 Prophesee Metavision 解決方案
Prophesee Metavision 事件視覺(jué)傳感器和人工智能算法針對(duì)驍龍平臺(tái)進(jìn)行了優(yōu)化,使運(yùn)動(dòng)模糊消除(motion blur cancellation)的效果和整體圖像的質(zhì)量都得到前所未有的提升,尤其是在快速移動(dòng)和低光等傳統(tǒng)基于幀的 RGB 傳感器難以應(yīng)對(duì)的場(chǎng)景中。
Prophesee 首席執(zhí)行官兼聯(lián)合創(chuàng)始人 Luca Verre 表示:“自 2023 年 2 月宣布合作以來(lái),如今我們已取得了重大進(jìn)展,證明了 Prophesee 事件視覺(jué)技術(shù)對(duì)提升搭載驍龍移動(dòng)平臺(tái)智能手機(jī)影像質(zhì)量的顯著作用,這是里程碑式的技術(shù)進(jìn)步。現(xiàn)在,我們很高興宣布 Metavision Deblur 解決方案已準(zhǔn)備就緒,可投入生產(chǎn)。我們期待通過(guò) Prophesee Metavision 解決方案為新一代智能手機(jī)解鎖更強(qiáng)大的影像和視頻功能?!?/p>
高通技術(shù)公司產(chǎn)品管理副總裁 Judd Heape 表示:“我們很高興繼續(xù)與 Prophesee 保持緊密合作,協(xié)力推動(dòng) Prophesee Metavision 事件視覺(jué)技術(shù)與第三代驍龍 8 旗艦移動(dòng)平臺(tái)的無(wú)縫兼容。這將顯著提升手機(jī)影像質(zhì)量,同時(shí)為搭載驍龍移動(dòng)平臺(tái)的智能設(shè)備解鎖更多基于事件相機(jī)的免快門(mén)功能的新潛能。”
Prophesee 突破性的事件視覺(jué)傳感器能夠?yàn)槭謾C(jī)攝影提供全新的感知維度。由于事件視覺(jué)傳感僅關(guān)注場(chǎng)景中的動(dòng)態(tài)變化,能夠迅速響應(yīng)并連續(xù)追蹤像素變化,從而打破了傳統(tǒng)的成像范式。
Metavision 傳感器中的每個(gè)像素都有一個(gè)內(nèi)嵌的邏輯核(logic core),使其能夠作為神經(jīng)元來(lái)工作。 每個(gè)像素都能根據(jù)各自感應(yīng)到的光子數(shù)量,異步且智能地激活自身。像素的每次激活稱(chēng)為一個(gè)“事件(event)”,因此在本質(zhì)上,事件是由場(chǎng)景動(dòng)態(tài)驅(qū)動(dòng)的,其采集速度也始終與實(shí)際場(chǎng)景動(dòng)態(tài)相匹配。
通過(guò)同步 Prophesee 事件傳感器和基于幀的傳感器的數(shù)據(jù),手機(jī)攝影可以實(shí)現(xiàn)高性能的圖像去模糊。系統(tǒng)能夠?qū)⑹录鞲衅饕晕⒚霝閱挝挥涗浀氖录畛涞絻蓭瑘D像的間隙,通過(guò)算法提取純動(dòng)態(tài)信息,從而修復(fù)運(yùn)動(dòng)模糊。
關(guān)于手機(jī)應(yīng)用的更多詳細(xì)信息,請(qǐng)?jiān)L問(wèn):http://www.rfnf.cn/event-based-vision-mobile/
Prophesee 是神經(jīng)擬態(tài)視覺(jué)系統(tǒng)的發(fā)明者和全球市場(chǎng)領(lǐng)導(dǎo)者。
Prophesee 為機(jī)器視覺(jué)開(kāi)發(fā)了突破性的事件視覺(jué)(Event-Based Vision)解決方案。這種新的視覺(jué)方法可顯著降低功耗、延遲、及數(shù)據(jù)處理量,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專(zhuān)利的 Metavision 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機(jī)器視覺(jué)在自動(dòng)駕駛汽車(chē)、工業(yè)自動(dòng)化、手機(jī)、物聯(lián)網(wǎng)和 AR/VR 等領(lǐng)域的效率。
Prophesee 在巴黎、格勒諾布爾、上海、香港、東京和硅谷設(shè)有全球辦事處,擁有 120 多名富有遠(yuǎn)見(jiàn)的工程師、50 多項(xiàng)國(guó)際專(zhuān)利以及豪華的投資陣容,包括英特爾投資、博世投資、雷諾集團(tuán)、沙特阿美 Prosperity7 Ventures、創(chuàng)新工場(chǎng)、超新星投資 Supernova Invest、索尼半導(dǎo)體、韋豪創(chuàng)芯、小米、華業(yè)天成、惠友資本等。
更多信息請(qǐng)?jiān)L問(wèn):www.rfnf.cn
驍龍(Snapdragon)是高通公司(Qualcomm Incorporated)的商標(biāo)或注冊(cè)商標(biāo)。驍龍(Snapdragon)是高通技術(shù)公司(Qualcomm Technologies, Inc.)和/或其子公司的產(chǎn)品。