產(chǎn)品中心 應(yīng)用方案 技術(shù)文摘質(zhì)量保證產(chǎn)品選型 下載中心業(yè)內(nèi)動態(tài) 選型幫助 品牌介紹 產(chǎn)品一覽 聯(lián)系我們
- rFpro與索尼合作開發(fā)高保真?zhèn)鞲衅髂P?/dl>
- 來源:蓋世汽車 發(fā)表于 2023/5/22
蓋世汽車訊 據(jù)外媒報道,仿真軟件專家rFpro宣布與索尼半導(dǎo)體解決方案集團(Sony Semiconductor Solutions Corporation)合作開發(fā)集成到rFpro軟件中的高保真?zhèn)鞲衅髂P汀4舜魏献鲗?cè)重于提高仿真解決方案的保真度,以顯著減少在傳感器開發(fā)周期中收集物理數(shù)據(jù)的需求。
圖片來源:rFpro
此次合作將使ADAS和自動駕駛汽車的感知系統(tǒng)能夠在虛擬環(huán)境中開發(fā)、訓(xùn)練和測試,從而助力加速開發(fā)。
rFpro運營總監(jiān)Matt Daley表示:“在我們最近推出的光線追蹤技術(shù)和rFpro的多重曝光攝像頭技術(shù)的開發(fā)過程中,索尼半導(dǎo)體一直是我們重要的合作伙伴。且通過與索尼密切合作并將其傳感器模型集成到我們的技術(shù)中,我們已經(jīng)能夠在仿真中實現(xiàn)高水平的相關(guān)性。因此,我們將共同幫助該行業(yè)減少對收集真實世界數(shù)據(jù)的依賴,降低成本和耗時。”
索尼半導(dǎo)體解決方案公司汽車業(yè)務(wù)部副總經(jīng)理Kenji Onishi表示:“rFpro和索尼半導(dǎo)體解決方案之間的合作將為ADAS感知系統(tǒng)開發(fā)人員提供車規(guī)級End2End仿真管道。根據(jù)攝像頭系統(tǒng)中使用的圖像傳感器的內(nèi)部架構(gòu),索尼已經(jīng)準備了一個傳感器模型,以實現(xiàn)車規(guī)級保真度。”
圖片來源:rFpro
使用深度神經(jīng)網(wǎng)絡(luò)開發(fā)的感知軟件和汽車圖像傳感器都是該管道的組成部分,并且變得更加復(fù)雜以滿足對更高ADAS功能和穩(wěn)健性的需求,但這也給開發(fā)和驗證帶來了巨大壓力。車規(guī)級仿真是一種生成合成數(shù)據(jù)的工具,可作為上述問題的解決方案。
信號處理、LED閃爍緩解、光譜效應(yīng)和圖像傳感器控制(例如運動模糊和滾動快門)是索尼傳感器模型實現(xiàn)的復(fù)制現(xiàn)象的一些示例。索尼在傳感器模型和渲染系統(tǒng)之間的接口非常有效率,可以快速運行高保真仿真。該接口在索尼的所有汽車圖像傳感器中也是通用的,使用戶能夠在新一代傳感器模型上市時快速過渡。
仿真使車輛系統(tǒng)能夠經(jīng)受各種場景。天氣、時間、交通量和行人都可以獨立自動地控制和變化。rFpro已將場景中的所有內(nèi)容都使用準確的材料特性進行物理建模,并且重新創(chuàng)建的路面高度精度在1毫米以內(nèi)。
Daley補充說:“在仿真中,車輛每天可以行駛數(shù)千英里的高價值、高活動虛擬里程,且可以識別邊緣情況并快速生成新的迭代以運行傳感器系統(tǒng)。仿真使得測試無需現(xiàn)實世界中等待曝光的需要。在現(xiàn)實世界中,大部分行駛里程都相對平靜!
索尼是rFpro合作開發(fā)其光線追蹤技術(shù)的合作伙伴。該技術(shù)使用多條光線準確捕捉現(xiàn)實世界的所有細微差別。作為一種多路徑技術(shù),它可以可靠地仿真攝像頭周圍發(fā)生的大量反射。這對于低光場景或有多個光源以準確描繪反射和陰影的環(huán)境至關(guān)重要。
rFpro的光線追蹤應(yīng)用于仿真場景中的每個元素,這些元素已經(jīng)過物理建模以包含準確的材料屬性,以創(chuàng)建高保真度的圖像。由于這對計算要求很高,因此該技術(shù)可以實時解耦,且可以調(diào)整幀渲染速率以適應(yīng)所需的細節(jié)級別。
圖片來源:rFpro
汽車行業(yè)使用的現(xiàn)代HDR(高動態(tài)范圍)攝像頭捕捉不同時間長度的多次曝光。例如每幀短、中、長曝光。為了準確地仿真這一點,rFpro引入了多重曝光攝像頭API,并與傳感器制造商的傳感器模型集成在一起,從而使傳感器模型能夠以與物理對應(yīng)物完全相同的曝光時間對虛擬世界進行采樣。
Daley總結(jié)道:“通過rFpro渲染和索尼的傳感器模型管道,運動模糊、卷簾快門特性、濾色器特性和物理傳感器的信號處理都存在于仿真圖像中。新模型還允許在傳感器模型上復(fù)制圖像傳感器中的LED閃爍緩解功能,并在仿真中充分發(fā)揮作用。此外,該傳感器模型能夠與在rFpro的高保真資產(chǎn)和渲染系統(tǒng)上仿真的快速閃爍的LED光源進行交互,例如交通燈和車輛剎車燈。準確地復(fù)制這些現(xiàn)象對于實現(xiàn)與現(xiàn)實世界的高度關(guān)聯(lián)至關(guān)重要。”
- 如果本文收錄的圖片文字侵犯了您的權(quán)益,請及時與我們聯(lián)系,我們將在24內(nèi)核實刪除,謝謝!