雙方的技術(shù)和業(yè)務(wù)合作將實現(xiàn) Prophesee #Metavision? 事件傳感器和軟件與Snapdragon? 高級移動平臺之間的本地兼容性。
通過 Prophesee 突破性的無快門、連續(xù)和異步像素傳感方法,這項工作將顯著提高相機性能,即使在超高速運動場景和弱光環(huán)境下也能消除運動模糊。
2024 年 6 月 17 日,中國上海——Prophesee 與 Ultraleap 和雷鳥創(chuàng)新(TCL RayNeo)宣布建立戰(zhàn)略合作伙伴關(guān)系,三方將聯(lián)手開發(fā)低功耗的手勢識別技術(shù),共同推動AR體驗邁向全新高度。此次合作將結(jié)合Prophesee 領(lǐng)先的事件視覺傳感技術(shù)、Ultraleap 在手勢識別技術(shù)方面的專長,以及雷鳥創(chuàng)新在 消費級AR 硬件和軟件開發(fā)方面的專業(yè)技術(shù)積淀,共同打造兼具前沿互動性和沉浸感的 AR 眼鏡。
此次合作致力于通過創(chuàng)新的技術(shù)手段解決當(dāng)前AR行業(yè)面臨的關(guān)鍵挑戰(zhàn),包括尺寸、功耗和可用性。通過結(jié)合Prophesee 突破性的 Metavision? 事件視覺傳感器、Ultraleap 尖端的計算機視覺和機器學(xué)習(xí)模型,以及雷鳥創(chuàng)新先進的 AR眼鏡軟硬件技術(shù),未來的AR眼鏡將有望以符合人體工程學(xué)的設(shè)計理念,提供卓越的圖像質(zhì)量和AI+AR功能,為用戶帶來流暢、自然的交互體驗,同時實現(xiàn)精確的手勢識別,解決用戶實際使用困難。
Prophesee Metavision 事件視覺傳感技術(shù) 與Ultraleap 的手勢識別技術(shù)相結(jié)合,將實現(xiàn)低功耗、高速度的精準手勢識別和更自然的人機交互,無需物理按鈕和電容觸控。這是一種類似于用戶熟悉的手機和智能手表的交互模式,用戶可通過滑動和雙擊實現(xiàn)自然的交互,無需頻繁觸碰眼鏡、分散注意力。而雷鳥創(chuàng)新的革命性技術(shù)則為用戶帶來清晰的圖像質(zhì)量、實時多語言對話翻譯、智能導(dǎo)航和AI智能助手等豐富功能。這些技術(shù)的融合將為用戶帶來前所未有的AR產(chǎn)品體驗。
Ultraleap 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Tom Carter 表示:
“我們很高興與Prophesee和雷鳥創(chuàng)新和達成合作,共同為AR眼鏡帶來全新的交互體驗。我們的目標是打造一款直觀、身臨其境的AR眼鏡。我們相信,通過結(jié)合Ultraleap 的手勢識別技術(shù)、Prophesee 的事件視覺傳感器,以及雷鳥創(chuàng)新在 AR 領(lǐng)域的專業(yè)知識沉淀,我們將創(chuàng)造出一款全新的AR眼鏡,在增強用戶體驗的同時,樹立新的行業(yè)標準?!?/p>
雷鳥創(chuàng)新創(chuàng)始人兼首席執(zhí)行官李宏偉表示:
“此次與 Ultraleap 和 Prophesee 的合作是 AR 領(lǐng)域的重要里程碑。Ultraleap 的手勢識別技術(shù)與我們的 AR 眼鏡設(shè)計完美結(jié)合,將推動AR眼鏡的實用性和創(chuàng)新性達到新的高度。我們期待通過此次合作,為用戶帶來虛擬與現(xiàn)實完美融合的全新體驗?!?/p>
Prophesee 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Luca Verre 表示:
“Prophesee 事件視覺傳感器 GenX320 與 Ultraleap 先進的計算機視覺和機器學(xué)習(xí)追蹤模型相結(jié)合,將為XR 設(shè)備帶來更加直觀、沉浸感更強的交互體驗。加上雷鳥創(chuàng)新在AR領(lǐng)域的深厚技術(shù)積累,我們將共同推動AR系統(tǒng)的性能和可用性邁上新臺階,并拓展更廣闊的市場應(yīng)用前景?!?/p>
Ultraleap 領(lǐng)先的手勢識別和空中觸覺技術(shù)(mid-air haptic technologies)實現(xiàn)了與數(shù)字世界的自然交互,無需依賴觸摸屏、控制器或鍵盤?;谠谌斯ぶ悄?、機器學(xué)習(xí)和計算機視覺領(lǐng)域數(shù)十年的專業(yè)深耕,Ultraleap為日益互聯(lián)的世界帶來了自然、安全且便捷的數(shù)字互動方式,從提升2D屏幕體驗到打造全方位的3D沉浸式體驗。
Ultraleap 在歐洲、北美和亞洲擁有超過 150 名員工。公司提供完整的垂直軟件和硬件堆棧,為汽車、戶外、工業(yè)、XR、娛樂和醫(yī)療行業(yè)提供空間計算。
雷鳥創(chuàng)新成立于2021年,由TCL電子孵化,是一家專注于AR領(lǐng)域的新銳企業(yè)。公司深耕“硬件+軟件+應(yīng)用”全鏈路,在光學(xué)、顯示、算法及整機方面均有多年技術(shù)積累與沉淀,核心技術(shù)行業(yè)領(lǐng)先。
Prophesee 是神經(jīng)擬態(tài)視覺系統(tǒng)的發(fā)明者和全球市場領(lǐng)導(dǎo)者。
Prophesee 為機器視覺開發(fā)了突破性的事件視覺(Event-Based Vision)解決方案。這種新的視覺方法可顯著降低功耗、延遲、及數(shù)據(jù)處理量,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專利的 Metavision 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機器視覺在自動駕駛汽車、工業(yè)自動化、手機、物聯(lián)網(wǎng)和 AR/VR 等領(lǐng)域的效率。
Prophesee 在巴黎、格勒諾布爾、上海、香港、東京和硅谷設(shè)有全球辦事處。該公司由 120 多名富有遠見的工程師組成的團隊組成,擁有 50 多項國際專利,并擁有豪華的投資陣容,包括英特爾投資、博世投資、雷諾集團、沙特阿美 Prosperity7 Ventures、創(chuàng)新工場、超新星投資 Supernova Invest、索尼半導(dǎo)體、韋豪創(chuàng)芯、小米、華業(yè)天成、惠友資本等。
更多信息請訪問:m.rfnf.cn
2024 年 5 月 30 日,中國上海——領(lǐng)先的神經(jīng)擬態(tài)視覺傳感公司 Prophesee 宣布,其Metavision? HD 事件視覺傳感器和 AI 算法現(xiàn)已支持 AMD Kria? KV260視覺AI入門套件(AMD Kria? KV260 Vision AI Starter Kit),兩者的強強聯(lián)合將加速高級邊緣機器視覺應(yīng)用的開發(fā)。同時,此次合作也標志著業(yè)界首款兼容 AMD 平臺的事件視覺開發(fā)套件問世。該套件將為客戶提供一個高效平臺,助力客戶快速評估智慧城市、機器視覺、安全攝像頭、零售分析等領(lǐng)域的工業(yè)級解決方案,并將其投入生產(chǎn)。
該套件中包含一款突破性的即插即用主動光通信(Active Markers Tracking)應(yīng)用程序,支持 >1,000Hz 的 3D 姿態(tài)估計(3D pose estimation),能夠在像素級別上完全消除背景干擾,同時在復(fù)雜的照明條件下提供極高的魯棒性。該款應(yīng)用程序展現(xiàn)了Prophesee Metavision事件視覺技術(shù)的獨特功能,為實現(xiàn)一系列全新的超高速跟蹤用例提供了助力,如游戲控制器跟蹤、建筑工地安全、重載防搖擺系統(tǒng)等。
此外,更多的即用型應(yīng)用算法將在未來幾個月內(nèi)推出。
Prophesee入門套件是一款“開箱即用”的開發(fā)解決方案,讓開發(fā)人員能夠快速啟動并運行Prophesee Metavision SDK,以及Prophesee與索尼攜手打造的IMX636 HD事件視覺傳感器。這使得算法能夠輕松移植到AMD商用和工業(yè)級 SOM 上(這些模塊由定制的Zynq? UltraScale+? 多處理器片上系統(tǒng)(MPSoC)驅(qū)動),極大地提升了開發(fā)效率和系統(tǒng)性能。
AMD 工業(yè)、視覺、醫(yī)療和科學(xué)市場高級總監(jiān) Chetan Khona 表示:“Kria 生態(tài)系統(tǒng)正在蓬勃發(fā)展,這極大地促進了機器人專家和開發(fā)人員在動作捕捉、連接性技術(shù)和邊緣 AI 應(yīng)用領(lǐng)域的創(chuàng)新發(fā)展。Prophesee事件視覺傳感技術(shù)為機器視覺應(yīng)用提供了獨特的優(yōu)勢。事件視覺傳感生成的數(shù)據(jù)量較少,這一特點不僅確保了系統(tǒng)的高能效運行,還顯著降低了計算負擔(dān)與內(nèi)存需求,進而實現(xiàn)了更為迅捷的系統(tǒng)響應(yīng)?!?/p>
Prophesee 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Luca Verre 表示:“通過與 AMD 聯(lián)手,我們打造了一款高效的開發(fā)輔助工具,讓開發(fā)基于事件的邊緣應(yīng)用變輕松。為了讓開發(fā)人員充分體驗事件視覺技術(shù)低功耗和低延遲的獨特優(yōu)勢,我們提供了全方位的資源支持,同時打造了一個靈活的開發(fā)環(huán)境,讓開發(fā)人員能夠基于客戶定制應(yīng)用和用例的具體KPI,優(yōu)化機器視覺系統(tǒng)。此舉將進一步加速事件視覺技術(shù)在關(guān)鍵細分市場的普及,而Metavision的獨特優(yōu)勢也將助推這些細分市場的創(chuàng)新發(fā)展。
兼容 AMD Kria KV260 入門套件的 Prophesee 事件視覺解決方案現(xiàn)已上市。
Prophesee 為機器視覺開發(fā)了突破性的事件視覺(Event-Based Vision)解決方案。這種新的視覺方法可顯著降低功耗、延遲、及數(shù)據(jù)處理量,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專利的 Metavision 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機器視覺在自動駕駛汽車、工業(yè)自動化、手機、物聯(lián)網(wǎng)和 AR/VR 等領(lǐng)域的效率。
Prophesee 在巴黎、格勒諾布爾、上海、香港、東京和硅谷設(shè)有全球辦事處。該公司由 120 多名富有遠見的工程師組成的團隊組成,擁有 50 多項國際專利,并擁有豪華的投資陣容,包括英特爾投資、博世投資、雷諾集團、沙特阿美 Prosperity7 Ventures、創(chuàng)新工場、超新星投資 Supernova Invest、索尼半導(dǎo)體、韋豪創(chuàng)芯、小米、華業(yè)天成、惠友資本等。
更多信息請訪問:m.rfnf.cn
AMD, the AMD arrow, Kria, UltraScale+, Zynq, and combinations thereof are trademarks of Advanced Micro Devices, Inc.
2024年2月27日,中國上?!I(lǐng)先的神經(jīng)擬態(tài)視覺傳感公司 Prophesee 今日宣布,與高通技術(shù)公司的合作進入可量產(chǎn)階段。在巴塞羅那世界移動通信大會(MWC)期間,Prophesee 展示了其解決方案與驍龍?旗艦移動平臺的原生兼容性,以及神經(jīng)擬態(tài)視覺技術(shù)為智能手機攝像頭帶來的速度、能效和成像質(zhì)量方面的提升。
圖 1: 高通在驍龍峰會主會場介紹 Prophesee Metavision 解決方案
Prophesee Metavision 事件視覺傳感器和人工智能算法針對驍龍平臺進行了優(yōu)化,使運動模糊消除(motion blur cancellation)的效果和整體圖像的質(zhì)量都得到前所未有的提升,尤其是在快速移動和低光等傳統(tǒng)基于幀的 RGB 傳感器難以應(yīng)對的場景中。
Prophesee 首席執(zhí)行官兼聯(lián)合創(chuàng)始人 Luca Verre 表示:“自 2023 年 2 月宣布合作以來,如今我們已取得了重大進展,證明了 Prophesee 事件視覺技術(shù)對提升搭載驍龍移動平臺智能手機影像質(zhì)量的顯著作用,這是里程碑式的技術(shù)進步。現(xiàn)在,我們很高興宣布 Metavision Deblur 解決方案已準備就緒,可投入生產(chǎn)。我們期待通過 Prophesee Metavision 解決方案為新一代智能手機解鎖更強大的影像和視頻功能?!?/p>
高通技術(shù)公司產(chǎn)品管理副總裁 Judd Heape 表示:“我們很高興繼續(xù)與 Prophesee 保持緊密合作,協(xié)力推動 Prophesee Metavision 事件視覺技術(shù)與第三代驍龍 8 旗艦移動平臺的無縫兼容。這將顯著提升手機影像質(zhì)量,同時為搭載驍龍移動平臺的智能設(shè)備解鎖更多基于事件相機的免快門功能的新潛能。”
Prophesee 突破性的事件視覺傳感器能夠為手機攝影提供全新的感知維度。由于事件視覺傳感僅關(guān)注場景中的動態(tài)變化,能夠迅速響應(yīng)并連續(xù)追蹤像素變化,從而打破了傳統(tǒng)的成像范式。
Metavision 傳感器中的每個像素都有一個內(nèi)嵌的邏輯核(logic core),使其能夠作為神經(jīng)元來工作。 每個像素都能根據(jù)各自感應(yīng)到的光子數(shù)量,異步且智能地激活自身。像素的每次激活稱為一個“事件(event)”,因此在本質(zhì)上,事件是由場景動態(tài)驅(qū)動的,其采集速度也始終與實際場景動態(tài)相匹配。
通過同步 Prophesee 事件傳感器和基于幀的傳感器的數(shù)據(jù),手機攝影可以實現(xiàn)高性能的圖像去模糊。系統(tǒng)能夠?qū)⑹录鞲衅饕晕⒚霝閱挝挥涗浀氖录畛涞絻蓭瑘D像的間隙,通過算法提取純動態(tài)信息,從而修復(fù)運動模糊。
關(guān)于手機應(yīng)用的更多詳細信息,請訪問:http://m.rfnf.cn/event-based-vision-mobile/
Prophesee 是神經(jīng)擬態(tài)視覺系統(tǒng)的發(fā)明者和全球市場領(lǐng)導(dǎo)者。
Prophesee 為機器視覺開發(fā)了突破性的事件視覺(Event-Based Vision)解決方案。這種新的視覺方法可顯著降低功耗、延遲、及數(shù)據(jù)處理量,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專利的 Metavision 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機器視覺在自動駕駛汽車、工業(yè)自動化、手機、物聯(lián)網(wǎng)和 AR/VR 等領(lǐng)域的效率。
Prophesee 在巴黎、格勒諾布爾、上海、香港、東京和硅谷設(shè)有全球辦事處,擁有 120 多名富有遠見的工程師、50 多項國際專利以及豪華的投資陣容,包括英特爾投資、博世投資、雷諾集團、沙特阿美 Prosperity7 Ventures、創(chuàng)新工場、超新星投資 Supernova Invest、索尼半導(dǎo)體、韋豪創(chuàng)芯、小米、華業(yè)天成、惠友資本等。
更多信息請訪問:m.rfnf.cn
驍龍(Snapdragon)是高通公司(Qualcomm Incorporated)的商標或注冊商標。驍龍(Snapdragon)是高通技術(shù)公司(Qualcomm Technologies, Inc.)和/或其子公司的產(chǎn)品。
2024 年 1 月 30 日,加利福尼亞州門洛帕克市 – 今天,Zinn Labs 推出業(yè)內(nèi)首款基于事件的眼動追蹤系統(tǒng),適用于 VR/MR 頭顯和智能鏡框。事件傳感技術(shù)的核心功能是超高速、低功耗地捕捉眼動追蹤的相關(guān)信號。
智能眼鏡如今正在迅速發(fā)展,為人們提供了一種可隨時隨地訪問生成式 AI 的接口。Zinn Labs 的多種應(yīng)用演示已經(jīng)證明,由用戶眼動生成的注意力信號(attention signal)可以將用戶意圖與 AI 輸出的內(nèi)容無縫連接。
未來,隨著 AR 和 MR 計算設(shè)備追求更直觀的用戶交互,眼動追蹤將成為多種組件技術(shù)發(fā)展的先決條件。例如,眼動是用戶與數(shù)字環(huán)境最自然的交互方法。借助 Prophesee GenX320 事件傳感器,Zinn Labs 打造了具備高刷新率和低延時的眼動追蹤解決方案,能夠助力提升頭顯設(shè)備的響應(yīng)能力和體驗的真實感,對用戶而言極具吸引力。
Zinn Labs DK1凝視眼鏡平臺是一款開發(fā)套件,配備了基于事件的雙目眼動追蹤系統(tǒng)和外向攝像頭,并由 Zinn Labs 的 3D 眼動算法提供支持。DK1 配備了 Prophesee Metavision? 事件視覺傳感器 GenX320,這也是目前市面上尺寸最小的事件視覺傳感器。
“隨著用戶對實用性和體驗感的要求不斷提高,基于幀(圖像)的采集技術(shù)已無法滿足如今 AR/MR 可穿戴設(shè)備和頭顯對于速度、低延時、尺寸和功耗的要求。為此,Prophesee 專門設(shè)計開發(fā)了 GenX320,以滿足對實時性和處理效率的需求,為各種產(chǎn)品提供事件視覺的優(yōu)勢,例如 Zinn Labs 極具突破性 AR/MR 平臺支持的產(chǎn)品?!?Luca Verre, Prophesee 首席執(zhí)行官兼聯(lián)合創(chuàng)始人
DK1 支持低于 1° 的快速眼動追蹤精度,運行頻率為 120 Hz,端到端延時為 10 ms。開發(fā)套件附帶演示應(yīng)用程序,如以下介紹的可穿戴 AI 助手,可用于性能評估或客戶概念驗證集成項目。
Zinn Labs 將于 1 月 30 日和 31 日在加利福尼亞州舊金山舉辦的 SPIE AR | VR | MR 2024 上介紹該項技術(shù)并演示 DK1。請訪問www.zinnlabs.com了解更多信息,或聯(lián)系info@zinnlabs.com咨詢開發(fā)套件和授權(quán)事宜。
Zinn Labs, Inc. 為頭戴式設(shè)備設(shè)計瞳孔及眼動追蹤系統(tǒng),以及只有注視才能啟用的新型用戶界面。Zinn Labs 的技術(shù)結(jié)合了前沿的計算機視覺研究和對人類視覺系統(tǒng)的深刻理解,以及如何通過眼動捕捉用戶注意力,為新一代消費類電子設(shè)備帶來視覺優(yōu)先的腦機接口。
Prophesee 是世界上先進的神經(jīng)擬態(tài)視覺系統(tǒng)的發(fā)明者。
Prophesee 為機器視覺開發(fā)了突破性的事件視覺(Event-Based Vision)解決方案。這種新的視覺方法可顯著降低功耗、延遲、及數(shù)據(jù)處理的要求,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專利的 Metavision? 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機器視覺在自動駕駛、工業(yè)自動化、物聯(lián)網(wǎng)、手機和AR/VR 等領(lǐng)域的效率。
Prophesee 在巴黎、格勒諾布爾、上海、香港、東京和硅谷設(shè)有全球辦事處;由100多名富有遠見的工程師組成的團隊組成,擁有50多項國際專利,并擁有豪華的投資陣容,包括英特爾投資、博世投資、雷諾集團、沙特阿美Prosperity7 Ventures、創(chuàng)新工場、超新星投資Supernova Invest、索尼半導(dǎo)體、韋豪創(chuàng)新、小米、華業(yè)天成、惠友資本等。
了解更多:http://m.rfnf.cn/
在香港特區(qū)政府投資推廣署 的協(xié)助下,PROPHESEE今日宣布在香港設(shè)立區(qū)域總部,進一步在亞洲推廣神經(jīng)擬態(tài)人工智能技術(shù)的應(yīng)用。
香港投資推廣署助理署長蔣學(xué)禮博士表示:
“投資推廣署歡迎Prophesee‘落戶’香港。我們很高興看到Prophesee善用香港在研發(fā)實力、先進科技基建、法律制度和人才方面的優(yōu)勢,在香港設(shè)立區(qū)域總部。憑借國家‘十四五’規(guī)劃和粵港澳大灣區(qū)帶來的機遇,香港成為一個戰(zhàn)略樞紐,幫助 Prophesee這類創(chuàng)新企業(yè)開拓市場?!?/p>
Prophesee 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Luca Verre 先生表示:
“Prophesee致力于推動神經(jīng)擬態(tài)人工智能技術(shù)的落地與應(yīng)用,包括在手機、增強現(xiàn)實(AR)或虛擬現(xiàn)實(VR)頭顯、物聯(lián)網(wǎng)相機,以及工業(yè)自動化和汽車等領(lǐng)域 。大中華區(qū)和泛亞地區(qū)是上述領(lǐng)域最大且增長最快的市場。我們正在加速商業(yè)拓展,并且已經(jīng)與大中華區(qū)一些主要的手機制造商和物聯(lián)網(wǎng)解決方案公司達成合作共識,因此我們認為現(xiàn)在是來港設(shè)點的最佳時機,將香港作為我們進一步拓展亞洲業(yè)務(wù)的地區(qū)樞紐?!?/p>
Luca Verre補充表示,新開設(shè)的香港辦事處不僅是Prophesee在亞太地區(qū)的區(qū)域總部,也是客戶創(chuàng)新中心,負責(zé)統(tǒng)籌大中華區(qū)、日本和韓國的業(yè)務(wù)運營,同時為全球范圍內(nèi)的客戶開發(fā)創(chuàng)新的神經(jīng)擬態(tài)解決方案。公司將由總部派員并聘請香港人才出任高層管理團隊,以落實這一發(fā)展計劃。
Prophesee致力于開發(fā)事件(Event-based)視覺 傳感技術(shù),為機器視覺提供突破性的解決方案。該技術(shù)可顯著降低功耗,并極大減少延遲及數(shù)據(jù)處理要求,讓機器能夠識別傳統(tǒng)傳感技術(shù)無法感知的信息。
如欲了解更多關(guān)于Prophesee的資料,可瀏覽m.rfnf.cn。
24/F, Fairmont House, 8 Cotton Tree Drive, Central, Hong Kong 香港中環(huán)紅棉路8號東昌大廈24樓
Tel 電話: (852) 3107 1000
Fax 傳真: (852) 3107 9140
Website 網(wǎng)址: www.investhk.gov.hk
2023年10月16日,中國上海 ——領(lǐng)先的神經(jīng)擬態(tài)視覺傳感公司普諾飛思(Prophesee)今日宣布,推出業(yè)界首款專為超低功耗邊緣視覺設(shè)備集成設(shè)計的 Metavision? 事件視覺傳感器 GenX320。該新品為Prophesee第五代Metavision 傳感器產(chǎn)品,采用尺寸為 3x4mm 的裸片。GenX320的推出將 Prophesee開創(chuàng)性的事件視覺技術(shù)平臺的應(yīng)用范圍拓寬,擴展至快速增長的邊緣市場領(lǐng)域,覆蓋 AR/VR 設(shè)備、可穿戴設(shè)備、游戲、機器人、筆記本和平板電腦、物聯(lián)網(wǎng)設(shè)備等。
基于 Prophesee 豐富經(jīng)驗和多年的技術(shù)積淀,GenX320 事件視覺傳感器能夠為各種應(yīng)用帶來速度、低延遲、動態(tài)范圍和能效方面的優(yōu)勢。GenX320 事件視覺傳感器采用 BSI 堆棧式技術(shù),像素尺寸為 320×320 6.3μm,采用微型的 1/5” 光學(xué)格式,因此,在能源、計算和尺寸都受制約的嵌入式邊緣視覺系統(tǒng)中,GenX320 事件視覺傳感器正契合其對于高效集成事件視覺傳感的技術(shù)要求。即使在極具挑戰(zhàn)性的操作和照明條件下,GenX320 仍能以超低功耗提供穩(wěn)定、高速的視覺感知。
Prophesee 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Luca Verre 表示:“事件視覺傳感器具備卓越的性能及能效,非常適合低功耗邊緣人工智能市場各式各樣的應(yīng)用。基于在其他應(yīng)用領(lǐng)域取得商業(yè)成功,我們開發(fā)了這款全新的 Metavision 事件視覺傳感器,專門滿足邊緣系統(tǒng)開發(fā)人員的需求。該款傳感器易于集成、配置和優(yōu)化,適用于運動和物體檢測、存在感知、手勢識別、眼球追蹤,以及其它高增長市場的多種用例?!?/p>
GenX320現(xiàn)可從 Prophesee 及其銷售合作伙伴處購買。GenX320 配套一整套開發(fā)工具,包括裝有板載芯片 (COB) GenX320 模塊或緊湊型光學(xué)柔性模塊的綜合評估套件 (Evaluation Kit),可幫助開發(fā)人員輕松探索和開展優(yōu)化工作。此外,Prophesee 還提供一系列組裝套件,可無縫連接到各種嵌入式平臺(例如 STM32 MCU),從而縮短產(chǎn)品上市時間(Time-to-Market)。
“基于 Prophesee Metavision 事件傳感器的獨特功能,Zinn Labs 正在開發(fā)新一代視線跟蹤系統(tǒng)。 Prophesee 新型 GenX320 傳感器能夠以毫秒為時間單位,捕捉眼睛和注視動作的變化。相比傳統(tǒng)的基于視頻的視線跟蹤模式,使用 GenX320 傳感器,Zinn Labs 能夠以更小的功率及計算量來跟蹤眼睛的特征變化(視線追蹤系統(tǒng)的功率低于 20 mW)。此外,由于新款傳感器的封裝尺寸更小,使得事件視覺傳感器能夠首次應(yīng)用于空間有限的 AR/VR 頭顯設(shè)備中。Zinn Labs 很高興能與 Prophesee 合作,我們正在將 GenX320 傳感器集成到即將推出的客戶項目中?!?/p>
Kevin Boyle
Zinn Labs 創(chuàng)始人兼首席執(zhí)行官
視頻 1 – 由GenX320 Metavision傳感器提供支持的 Zinn Labs?眼動追蹤應(yīng)用程序
“每當(dāng)將視覺技術(shù)應(yīng)用于駕駛員監(jiān)控解決方案(DMS)和電視服務(wù)等產(chǎn)品中時,隱私總是消費者最關(guān)心的問題之一。通過 Prophesee Metavision 事件視覺技術(shù),我們無需對場景進行明確的視覺表征即可理解場景,將我們的“隱私設(shè)計 (PbD)”原則提升至更安全的水平。只需捕獲每個像素的變化,無需像傳統(tǒng)圖像傳感器那樣捕獲整個場景,我們的算法可通過捕獲的內(nèi)容來感知到場景中的細節(jié),不用再對其進行詳細表征。我們還開發(fā)了一個概念驗證演示,證明使用神經(jīng)擬態(tài)傳感器完全可以實現(xiàn)駕駛員監(jiān)控解決方案。使用 1MP 神經(jīng)擬態(tài)傳感器,我們可以推斷出與基于主動 NIR 照明 2MP 視覺傳感器的解決方案類似的性能。未來,我們將重點關(guān)注GenX320 神經(jīng)形態(tài)傳感器,它適用于隱私敏的感智能設(shè)備,將幫助我們進一步提升用戶體驗?!?/p>
Petronel Bigioi
XPERI 首席技術(shù)官
“通過在 Ultra Leap 的 TouchFree 應(yīng)用中的高精度手勢識別和手部跟蹤功能,我們看到了 Prophesee 事件視覺傳感器在實現(xiàn)無接觸交互方面的優(yōu)勢。Prophesee 事件視覺傳感器能夠在極具挑戰(zhàn)性的環(huán)境條件下,以極為高效的能耗水平和低系統(tǒng)延遲運行,從而增強我們無接觸用戶界面(UI)的整體用戶體驗和直觀性。隨著新款 Genx320 傳感器的推出,將有更多的應(yīng)用和設(shè)備,包括電池供電的小型系統(tǒng)以及不斷增加的無接觸式用例,都將受益于事件視覺傳感器的穩(wěn)健性、低功耗、低延遲以及高動態(tài)范圍的優(yōu)勢,進一步提升各類數(shù)字內(nèi)容交互的便利性和易用性?!?br />
Tom Carter
ULTRALEAP 聯(lián)合創(chuàng)始人兼首席執(zhí)行官
Prophesee 是神經(jīng)擬態(tài)視覺系統(tǒng)的發(fā)明者和全球市場領(lǐng)導(dǎo)者。
Prophesee 為機器視覺開發(fā)了突破性的事件視覺(Event-Based Vision)解決方案。這種新的視覺方法可顯著降低功耗、延遲、及數(shù)據(jù)處理量,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專利的 Metavision 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機器視覺在自動駕駛汽車、工業(yè)自動化、手機、物聯(lián)網(wǎng)和 AR/VR 等領(lǐng)域的效率。
Prophesee 全球總部位于巴黎,中國總部位于上海。公司還在東京和硅谷等全球多地設(shè)有辦事處。公司有 100 多位科研人員。擁有 50 多項國際專利, 并得到領(lǐng)先國際投資者的支持,包括 Intel、BOSCH、雷諾集團、小米、韋爾股份等戰(zhàn)略投資人,及歐洲投資銀行 EIB、創(chuàng)新工場、韋豪創(chuàng)芯、Prosperity7 Ventures 等產(chǎn)業(yè)投資人。
更多信息請訪問:m.rfnf.cn
2023 年 9 月 25 日,中國上海 —— 領(lǐng)先的神經(jīng)擬態(tài)視覺傳感公司 Prophesee 今日宣布推出高速、經(jīng)濟高效且緊湊的評估套件 (EVK),以滿足計算機視覺開發(fā)人員想要基于堆棧式事件視覺傳感器 IMX646 HD 開發(fā)應(yīng)用的需求。
該款EVK功能完善,在中國進行設(shè)計及制造,并針對中國本地的需求進行了優(yōu)化,為計算機視覺工程師提供了經(jīng)充分測試的解決方案,這個方案是實現(xiàn)高效技術(shù)入門、快速原型機開發(fā)的好幫手。 此外,該套件還與 Prophesee 榮獲五項大獎的 Metavision Intelligence 軟件兼容。配備 技術(shù)支持、支持訪問知識中心、應(yīng)用說明、高級文檔,以及一個由全球 10,000 多名開發(fā)者用戶組成的高速發(fā)展的社區(qū)論壇。
Prophesee 副總裁兼大中華區(qū)總經(jīng)理楊雪飛表示:“這款新的 EVK 能夠幫助計算機視覺工程師、集成商和相機制造商們?nèi)妗?strong>準確地了解這種創(chuàng)新架構(gòu)的性能優(yōu)勢,并更好地進行應(yīng)用。EVK5 是我們專為中國市場的需求而定制的,它可以很好地幫助開發(fā)人員開始評估事件視覺傳感器的性能,包括在各種用例以及一些特定市場的機器視覺系統(tǒng)中?!?/p>
堆棧式事件視覺傳感器 IMX646 結(jié)合了索尼的 CMOS 圖像傳感器技術(shù)與 Prophesee 獨特的 Metavision? 事件視覺傳感技術(shù),可以在1K lux 下提供低于 800μs 的延遲輸出 ,動態(tài)范圍大于 110dB,并且可以在低至 0.08 lux 的低光照條件下運行。該傳感器實現(xiàn)了業(yè)界最小的*1 4.86μm像素尺寸, 1/2.5-型,約 92 萬有效像素。IMX646 具備行業(yè)領(lǐng)先的像素間距和1280 x720 像素的高分辨率,從而成為各種視覺用例的理想選擇,包括物聯(lián)網(wǎng)、監(jiān)控攝像頭、消費類應(yīng)用等。
新款 EVK5 還配套了Prophesee Metavision? Intelligence 軟件。Metavision? Intelligence 軟件是當(dāng)前業(yè)界最全面的事件視覺軟件,提供95 種算法、79 個代碼示例和 24 個教程 ,并由全球開源社區(qū)的開發(fā)人員不斷進行擴展完善,可促進高效的應(yīng)用開發(fā)。其技術(shù)廣度讓開發(fā)者們能夠快速執(zhí)行各種設(shè)計探索,并可根據(jù)特定市場需求,有效整合定制的軟件應(yīng)用。
該套件由 USB 充電,配套一個 CS 接口鏡頭、一個 CS 轉(zhuǎn) M12 轉(zhuǎn)接環(huán)、一根 USB-A 轉(zhuǎn) USB-A 數(shù)據(jù)線、一個三腳架轉(zhuǎn)接螺母的、一根 EVS 觸發(fā)線,以及一本入門指南。
Prophesee 是神經(jīng)擬態(tài)視覺系統(tǒng)的發(fā)明者和全球市場領(lǐng)導(dǎo)者。
Prophesee 為機器視覺開發(fā)了突破性的事件視覺(Event-Based Vision)解決方案。這種新的視覺方法可顯著降低功耗、延遲、及數(shù)據(jù)處理量,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專利的 Metavision 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機器視覺在工業(yè)自動化、手機、物聯(lián)網(wǎng)和 AR/VR 等領(lǐng)域的效率。
Prophesee 全球總部位于巴黎,中國總部位于上海。公司還在東京和硅谷等全球多地設(shè)有辦事處。公司有 100 多位科研人員。擁有 50 多項國際專利, 并得到領(lǐng)先國際投資者的支持,包括 Intel、BOSCH、雷諾集團、小米、韋爾股份等戰(zhàn)略投資人,及歐洲投資銀行 EIB、創(chuàng)新工場、韋豪創(chuàng)芯、Prosperity7 Ventures 等產(chǎn)業(yè)投資人。
更多信息請訪問:http://m.rfnf.cn/
數(shù)字標牌和顯示器正變得越來越普遍和吸引人。這一領(lǐng)域的一個新發(fā)展是,無需觸摸屏幕即可與數(shù)字內(nèi)容進行交互 ——完全免觸摸。
Ultraleap的TouchFree解決方案使用戶能夠通過自然的手部互動與數(shù)字屏幕進行交互,并在不影響生產(chǎn)率和吞吐量的情況下提供更高水平的互動。
要實現(xiàn)交互式數(shù)字標牌的廣泛應(yīng)用,關(guān)鍵在于解決不同照明環(huán)境(包括夜間和明亮的空間)下的穩(wěn)定性問題。此外,通過玻璃櫥窗進行交互是一個高價值的應(yīng)用案例,可以展現(xiàn)出需要注意的復(fù)雜問題。
Prophesee基于事件的Metavision?技術(shù)具有高動態(tài)范圍、低功耗和高速異步讀取功能,開啟所有環(huán)境中實現(xiàn)一致的體驗。
視頻1 – Ultraleap’s Touch-Free應(yīng)用:
點餐
視頻2 – Ultraleap’s Touch-Free應(yīng)用:
球池游戲
Ultraleap與索尼和Prophesee合作開發(fā)了采用兩個IMX636事件傳感器立體設(shè)置的技術(shù)演示器。該演示器與Ultraleap世界級手勢追蹤技術(shù)以及TouchFree解決方案配合使用,可提供世界上首個采用Prophesee Metavision?技術(shù)的免觸摸體驗。
我們非常高興地宣布,Ultraleap將在CVPR 2023上演示這項新技術(shù)。演示將于6月19日上午10:30在事件視覺研討會上進行。請與我們會面了解Metavision能為您的應(yīng)用帶來哪些幫助。
成功而繁忙的展會過后,Android Authority 將 Prophesee 評選為MWC 2023 年度最佳品牌和移動技術(shù)供應(yīng)商。
“照片模糊是每個智能手機攝影師的魔咒,但這一魔咒不會持續(xù)太久。Prophesee 已與高通公司合作,將“基于事件”的 Metavision 技術(shù)引入未來的智能手機?!?/span>
視頻 1 – 體育賽事 : 將 Prophesee Metavision 傳感器和算法與 Snapdragon 平臺相結(jié)合,獲得的高速場景初步去模糊結(jié)果。
雙方的技術(shù)和業(yè)務(wù)合作將實現(xiàn) Prophesee #Metavision? 事件傳感器和軟件與Snapdragon? 高級移動平臺之間的本地兼容性。
通過 Prophesee 突破性的無快門、連續(xù)和異步像素傳感方法,這項工作將顯著提高相機性能,即使在超高速運動場景和弱光環(huán)境下也能消除運動模糊。
每年都有數(shù)千家公司和更多的觀眾參加世界移動通信大會。除報道外,Android Authority 團隊公布了該獎項,以幫助讀者“從信號中分離出噪音”,了解展會上發(fā)布的最佳公告。
“有了這項犀利的攝像技術(shù),向模糊照片說再見吧?!?/p>
事件視覺技術(shù)將為手機攝像頭帶來激動人心的進步,這可能是新款手機最重要的差異化功能。與領(lǐng)先的高端移動技術(shù)供應(yīng)商高通技術(shù)公司合作,將有助于加速手機行業(yè)采用Prophesee 的解決方案。
2023 年 2 月 28 日,中國上海 ——Prophesee 與高通技術(shù)公司今日宣布,雙方將合作優(yōu)化 Prophesee Metavision 事件視覺傳感器與高通驍龍移動平臺的深度融合,為智能手機提供神經(jīng)擬態(tài)視覺技術(shù)在速度、性能和成像質(zhì)量方面的優(yōu)勢。借助 Prophesee 事件視覺傳感器的異步像素檢測以及連續(xù)事件流輸出,為智能手機廠家提供一種高效快速的途徑來顯著提升相機影像性能,特別是在高速移動的動態(tài)場景(例如運動場景)以及低光照環(huán)境下。此外,Prophesee 正在開發(fā)一個開發(fā)套件,以支持搭載驍龍平臺的下一代設(shè)備集成 Metavision 傳感器技術(shù)。
高通產(chǎn)品管理副總裁 Judd Heape 表示:“神經(jīng)擬態(tài)視覺技術(shù)突破了行業(yè)現(xiàn)有的游戲規(guī)則,能夠解決傳統(tǒng)相機的局限并提升整體用戶體驗,Prophesee 無疑是這一領(lǐng)域的領(lǐng)導(dǎo)者,我們有信心雙方的合作將進一步推動領(lǐng)先的 OEM 部署神經(jīng)擬態(tài)視覺技術(shù),從而開啟移動影像技術(shù)的全新時代?!?Judd Heape 補充道:“由于事件相機的成像不受快門的限制,即便是在惡劣的環(huán)境下,也能夠顯著提升搭載驍龍的下一代智能手機的影像性能,為我們的客戶解鎖一系列全新的可能性?!?/p>
Prophesee 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Luca Verre 表示:“我們很高興能夠與高通建立戰(zhàn)略合作關(guān)系,共同推動事件視覺技術(shù)與驍龍生態(tài)的集成與發(fā)展。高通驍龍是全球最受歡迎的移動平臺之一,通過此次合作,產(chǎn)品開發(fā)人員將能夠大幅提升手機攝影的性能及影像質(zhì)量,優(yōu)化用戶體驗,這是基于幀的傳統(tǒng)成像方式難以實現(xiàn)的?!?/p>
工作原理
Prophesee 突破性的事件視覺傳感器能夠為手機攝影提供全新的感知維度。由于事件視覺傳感僅關(guān)注場景中的動態(tài)變化,能夠迅速響應(yīng)并連續(xù)追蹤像素變化,從而打破了傳統(tǒng)的成像范式。
Metavision 傳感器中的每個像素都有一個內(nèi)嵌的邏輯核(logic core),使其能夠作為神經(jīng)元來工作。 每個像素都能根據(jù)各自感應(yīng)到的光子數(shù)量,異步且智能地激活自身。像素的每次激活稱為一個“事件(event)”,所以在本質(zhì)上,事件是由場景動態(tài)驅(qū)動的,其采集速度也始終與實際場景動態(tài)相匹配。
通過同步 Prophesee 事件傳感器和基于幀的傳感器的數(shù)據(jù),手機攝影可以實現(xiàn)高性能的圖像去模糊。系統(tǒng)能夠?qū)⑹录鞲衅饕晕⒚霝閱挝挥涗浀氖录畛涞絻蓭瑘D像的間隙,通過算法提取純動態(tài)信息,從而修復(fù)運動模糊。
支持 Prophesee 事件視覺傳感技術(shù)的開發(fā)套件預(yù)計將于今年上市。.
Prophesee 是神經(jīng)擬態(tài)視覺系統(tǒng)的發(fā)明者和全球市場領(lǐng)導(dǎo)者。
Prophesee 為機器視覺開發(fā)了突破性的事件視覺(Event-Based Vision)解決方案。這種新的視覺方法可顯著降低功耗、延遲、及數(shù)據(jù)處理量,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專利的 Metavision 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機器視覺在工業(yè)自動化、手機、物聯(lián)網(wǎng)和 AR/VR 等領(lǐng)域的效率。
Prophesee 全球總部位于巴黎,中國總部位于上海。公司還在東京和硅谷等全球多地設(shè)有辦事處。公司有 100 多位科研人員。擁有 50 多項國際專利, 并得到領(lǐng)先國際投資者的支持,包括 Intel、BOSCH、雷諾集團、小米、韋爾股份等戰(zhàn)略投資人,及歐洲投資銀行 EIB、創(chuàng)新工場、韋豪創(chuàng)芯、Prosperity7 Ventures 等產(chǎn)業(yè)投資人。
更多信息請訪問:www.prophesee.ai