加入星計(jì)劃,您可以享受以下權(quán)益:

  • 創(chuàng)作內(nèi)容快速變現(xiàn)
  • 行業(yè)影響力擴(kuò)散
  • 作品版權(quán)保護(hù)
  • 300W+ 專業(yè)用戶
  • 1.5W+ 優(yōu)質(zhì)創(chuàng)作者
  • 5000+ 長期合作伙伴
立即加入
  • 視訊介紹
    • 這些投資機(jī)構(gòu)看好的普諾飛思到底是什么來頭?
    • 為什么這么多的投資機(jī)構(gòu)都看好這家企業(yè)呢?
    • “基于事件”的神經(jīng)擬態(tài)視覺技術(shù)的落地情況如何?
    • 本輪融資會對普諾飛思產(chǎn)生那些影響?
  • 推薦器件
  • 相關(guān)推薦
  • 電子產(chǎn)業(yè)圖譜
申請入駐 產(chǎn)業(yè)圖譜

“基于事件”的神經(jīng)擬態(tài)視覺技術(shù)受資本熱捧,普諾飛思完成C輪融資

2021/07/08
664
閱讀需 10 分鐘
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點(diǎn)資訊討論

近日,普諾飛思(Prophesee)宣布完成 C輪融資,由創(chuàng)新工場領(lǐng)投、小米及上海韋豪創(chuàng)芯跟投,數(shù)家老股東加碼。

先來介紹一下這幾家投資機(jī)構(gòu),首先創(chuàng)新工場是李開復(fù)博士創(chuàng)立的,目前,創(chuàng)新工場管理著超過25億美元的基金總額,所投資的著名AI獨(dú)角獸企業(yè)包括Momenta、文遠(yuǎn)知行(WeRide)、創(chuàng)新奇智(AInnovation)、第四范式(4Paradigm)、地平線機(jī)器人(Horizon Robotics)等。據(jù)了解,普諾飛思是創(chuàng)新工場投資的第一家歐洲企業(yè),此前的投資專注于中國市場。

另外跟投的兩家小米和韋豪創(chuàng)芯,眾所周知,小米是全球三大移動設(shè)備供應(yīng)商之一,韋豪創(chuàng)芯是國內(nèi)知名的投資公司,由國內(nèi)半導(dǎo)體行業(yè)龍頭韋爾股份作為發(fā)起人參與投資,而韋爾股份旗下的豪威科技是全球前三的CMOS圖像傳感器供應(yīng)商。

這些投資機(jī)構(gòu)看好的普諾飛思到底是什么來頭?

據(jù)悉,普諾飛思總部位于法國巴黎,此前已獲英特爾資本、雷諾集團(tuán)、博世創(chuàng)投、歐洲投資銀行等北美、歐洲和日本的知名投資人支持,加上此輪中國的行業(yè)頂級投資人,組成了強(qiáng)大的國際資本陣容。

為什么這么多的投資機(jī)構(gòu)都看好這家企業(yè)呢?

普諾飛思是世界上最先進(jìn)的神經(jīng)擬態(tài)視覺系統(tǒng)的發(fā)明者,其原視覺(Metavision?)傳感器專利和AI算法引入了一種全新的基于人眼和大腦工作原理的計(jì)算機(jī)視覺范例。普諾飛思的技術(shù)可以被理解為“神經(jīng)擬態(tài)機(jī)器眼”。當(dāng)前,許多機(jī)器視覺技術(shù)都遵循傳統(tǒng)的成像原則——即機(jī)器每秒看到25幀的靜止圖像,通過對每幀圖像進(jìn)行智能解析,做進(jìn)一步的識別與分析。但這種“基于幀”的成像方式不僅讓機(jī)器的“眼”和“大腦”速度不匹配,系統(tǒng)響應(yīng)時(shí)間慢,機(jī)器每一幀都做記錄還會儲存大量的無用數(shù)據(jù),產(chǎn)生大量冗余數(shù)據(jù),耗費(fèi)系統(tǒng)處理資源。

受人眼視網(wǎng)膜和大腦工作原理的啟發(fā),普諾飛思創(chuàng)建了神經(jīng)擬態(tài)傳感器和生物啟發(fā)算法,將基于圖像靜止幀的傳感器改為“基于事件”的視覺系統(tǒng)。在基于事件的視覺傳感器上,每個像素都是異步且獨(dú)立的,能獨(dú)立感知并記錄場景中物體的運(yùn)動。像素會隨著場景變化的節(jié)奏而動態(tài)變化,而非按照預(yù)先設(shè)定好的每秒25幀。通過普諾飛思神經(jīng)擬態(tài)視覺傳感器和軟件技術(shù),生成的數(shù)據(jù)量比傳統(tǒng)的圖像傳感器減少十到千倍。普諾飛思傳感器可實(shí)現(xiàn)像素級別的曝光調(diào)節(jié),即使在極暗或極亮的光照條件下,也可實(shí)現(xiàn) >120dB的動態(tài)范圍。普諾飛思“基于事件”的神經(jīng)擬態(tài)視覺系統(tǒng)不僅能讓每個像素獨(dú)立展現(xiàn)場景的動態(tài)及生命力,更可以讓機(jī)器看見隱藏的場景運(yùn)動信息,進(jìn)一步模擬人類雙眼,“看到”行云流水般的世界。

“基于事件”的神經(jīng)擬態(tài)視覺技術(shù)的落地情況如何?

根據(jù)普諾飛思聯(lián)合創(chuàng)始人兼CEO盧卡·維雷(Luca Verre)先生的介紹,目前“基于事件”的神經(jīng)擬態(tài)視覺技術(shù)已經(jīng)落地于以下五大領(lǐng)域:

  • 全球首個基于神經(jīng)擬態(tài)視覺系統(tǒng)的座艙監(jiān)控技術(shù)

利用普諾飛思原視覺(MetaVision)傳感技術(shù)提供的時(shí)間數(shù)據(jù),一家致力于駕駛監(jiān)控等技術(shù)研發(fā)的美國企業(yè)Xperi開發(fā)出了全球首個基于神經(jīng)擬態(tài)視覺系統(tǒng)的駕駛員監(jiān)控解決方案(DMS)。

該方案可通過對駕駛員眼睛、表情的快速監(jiān)測,以及計(jì)數(shù)駕駛員的眨眼頻率,從而對他目光注視的情況進(jìn)行監(jiān)測。具體來講,當(dāng)駕駛員疲勞的時(shí)候,眨眼頻率和速度都會大大提高。傳統(tǒng)RGB攝像頭可以檢測到眨眼,但不能測算眨眼的速度。此外,駕駛員開車的時(shí)候,經(jīng)常需要面對陽光,然后就會放一塊遮光板或是戴太陽鏡來遮陽,與此同時(shí)會形成眼部暗區(qū),傳統(tǒng)視覺方案在這個情況下,要么看不到眼睛,要么把臉部其他部位過爆。針對以上這些問題,DMS都能很好的解決。

由高級駕駛輔助軟件開發(fā)商Terranet AB與梅賽德斯-奔馳共同開發(fā)的VoxelFlow傳感技術(shù),采用了普諾飛思原視覺(MetaVision)傳感器,使自動駕駛汽車ADAS系統(tǒng)能夠快速、準(zhǔn)確地理解周圍的環(huán)境,增強(qiáng)現(xiàn)有雷達(dá)激光雷達(dá)和攝像頭系統(tǒng)的性能,比如可掃描車輛半徑增加到40米,反應(yīng)時(shí)間卻只要3ms。

具體來講,與第一個應(yīng)用類似,在車上安裝三個基于事件的傳感器,還有一個激光柱,激光柱進(jìn)行掃描,在掃的時(shí)候經(jīng)常碰一個問題,即點(diǎn)不夠多,而且循環(huán)比較慢,此時(shí)普諾飛思的傳感器會追蹤激光柱的燈光,然后對掃描到內(nèi)容進(jìn)行3D建模,從而來分析前端路況的情況。

  • 通過細(xì)胞實(shí)時(shí)無菌檢測實(shí)現(xiàn)的下一代細(xì)胞療法

標(biāo)準(zhǔn)的無菌檢測依舊參照幾十年前的微生物學(xué)的方法,通常需要7-14天來完成,這大大延遲了有關(guān)細(xì)胞治療的發(fā)展。但使用Cambridge Consultants和普諾飛思共同開發(fā)的自動化污染檢測系統(tǒng),則可以在ms級時(shí)間內(nèi)進(jìn)行反饋,這個系統(tǒng)用到了普諾飛思的原視覺(MetaVision)傳感器和AI模型。

值得一提的是,這個細(xì)胞療法在血站里沒太多用處,因?yàn)檠緯每股貋沓W詣踊廴緳z測系統(tǒng)的作用是在利用細(xì)胞作為介質(zhì)生產(chǎn)的產(chǎn)品中尋找細(xì)菌和雜質(zhì),比如胰島素的制作。

  • 首位失明患者借助光遺傳療法恢復(fù)部分視力

根據(jù)《自然-醫(yī)學(xué)》(Nature Medicine)的報(bào)道,GenSight和普諾飛思共同開發(fā)的GS030光遺傳療法,讓失明患者恢復(fù)了部分視力。

具體來講,GenSight所生產(chǎn)的護(hù)目鏡當(dāng)中運(yùn)用了普諾飛思的技術(shù),可以通過失明人士視網(wǎng)膜中所植入的投光器對視覺系統(tǒng)進(jìn)行光刺激,進(jìn)而讓其恢復(fù)一部分的視覺功能。其中,普諾飛思設(shè)計(jì)的“硅視網(wǎng)膜(silicon retinas)”,能夠?qū)⑿盘柊l(fā)送給大腦進(jìn)行處理,該技術(shù)可專門針對于一些晚期的視網(wǎng)膜色素變性的病例。

  • 實(shí)時(shí)圖像去模糊,為傳統(tǒng)相機(jī)帶來巨大的提升

普諾飛思事件傳感器和傳統(tǒng)的傳感器結(jié)合起來,能夠改善手機(jī)拍照的質(zhì)量,也就是所謂的計(jì)算攝影。

具體來講,對于智能手機(jī)來說,拍攝的質(zhì)量是非常重要的。如果是傳統(tǒng)的基于幀的技術(shù),拍照的時(shí)候會產(chǎn)生運(yùn)動模糊的現(xiàn)象。事實(shí)上,防抖這個功能大家都在做,一般會借助于IMU,或者物理光學(xué)防抖。這種解決方案主要用來做自身防抖,當(dāng)被拍物體由于移動速度過而快造成的模糊卻是非常難以解決。例如在拍攝奔跑的寵物這樣的場景中,如果燈光條件不是特別好,曝光時(shí)間一般會比較長,拍攝結(jié)果就會較為模糊。對于傳統(tǒng)RGB以圖像為基礎(chǔ)的技術(shù)來說,這是一個根本性的問題,因?yàn)檫@項(xiàng)技術(shù)主要是為了捕捉靜態(tài)的圖像而設(shè)計(jì)的,不是為了捕捉動態(tài)信息。如果將傳統(tǒng)的靜態(tài)的以幀為基礎(chǔ)的技術(shù)和普諾飛思以事件為基礎(chǔ)的技術(shù)相結(jié)合,就可以解決這個模糊問題,運(yùn)用算法,甚至可以捕捉到時(shí)間分辨率為1μs的運(yùn)動。

本輪融資會對普諾飛思產(chǎn)生那些影響?

首先,本輪投資者都是中國的機(jī)構(gòu),有助于普諾飛思擴(kuò)展全球布局,深耕中國市場,進(jìn)一步加強(qiáng)在中國的商業(yè)發(fā)展與資源積累,滿足市場與客戶不斷增長的需求,并在半導(dǎo)體、工業(yè)、機(jī)器人、物聯(lián)網(wǎng)和移動設(shè)備等關(guān)鍵生態(tài)領(lǐng)域建立更廣泛的合作關(guān)系。值得一提的是,小米和韋豪創(chuàng)芯的戰(zhàn)略參與,也為普諾飛思進(jìn)入關(guān)鍵的移動設(shè)備和半導(dǎo)體領(lǐng)域提供了支持。

此外,基于本輪的融資合作,普諾飛思將加速下一代神經(jīng)擬態(tài)視覺傳感技術(shù)的硬件和軟件產(chǎn)品的開發(fā)與商業(yè)化;針對新興市場規(guī)劃產(chǎn)品路線;完善基礎(chǔ)設(shè)施,支持運(yùn)營及規(guī)模擴(kuò)張。

推薦器件

更多器件
器件型號 數(shù)量 器件廠商 器件描述 數(shù)據(jù)手冊 ECAD模型 風(fēng)險(xiǎn)等級 參考價(jià)格 更多信息
DS18S20 1 Dallas Semiconductor Serial Switch/Digital Sensor, 9 Bit(s), 0.50Cel, Round, 3 Pin, Through Hole Mount, TO-92, 3 PIN
暫無數(shù)據(jù) 查看
SI7006-A20-IM1R 1 Silicon Laboratories Inc Serial Switch/Digital Sensor, 14 Bit(s), 1Cel, Square, Surface Mount, 3 X 3 MM, DFN-6

ECAD模型

下載ECAD模型
$2.59 查看
AD7414ARTZ-1REEL 1 Rochester Electronics LLC Serial Switch/Digital Sensor, 10 Bit(s), 3Cel, Rectangular, Surface Mount, PLASTIC, MO-178AB, SOT-23, 6 PIN
暫無數(shù)據(jù) 查看
韋爾股份

韋爾股份

豪威集團(tuán)-上海韋爾半導(dǎo)體股份有限公司(SH:603501)是全球排名前列的中國半導(dǎo)體設(shè)計(jì)公司。集團(tuán)總部位于上海,研發(fā)中心與業(yè)務(wù)網(wǎng)絡(luò)遍布全球,年出貨量超過123億顆。豪威集團(tuán)致力于提供傳感器解決方案、模擬解決方案和觸屏與顯示解決方案,助力客戶在手機(jī)、安防、汽車電子、可穿戴設(shè)備,IoT,通信、計(jì)算機(jī)、消費(fèi)電子、工業(yè)、醫(yī)療等領(lǐng)域解決技術(shù)挑戰(zhàn),滿足日與俱增的人工智能與綠色能源需求。

豪威集團(tuán)-上海韋爾半導(dǎo)體股份有限公司(SH:603501)是全球排名前列的中國半導(dǎo)體設(shè)計(jì)公司。集團(tuán)總部位于上海,研發(fā)中心與業(yè)務(wù)網(wǎng)絡(luò)遍布全球,年出貨量超過123億顆。豪威集團(tuán)致力于提供傳感器解決方案、模擬解決方案和觸屏與顯示解決方案,助力客戶在手機(jī)、安防、汽車電子、可穿戴設(shè)備,IoT,通信、計(jì)算機(jī)、消費(fèi)電子、工業(yè)、醫(yī)療等領(lǐng)域解決技術(shù)挑戰(zhàn),滿足日與俱增的人工智能與綠色能源需求。收起

查看更多

相關(guān)推薦

電子產(chǎn)業(yè)圖譜