蘋果AR/VR專利針對(duì)“鏡子反射”提出內(nèi)容替換解決方案

查看引用/信息源請(qǐng)點(diǎn)擊：映維網(wǎng)

用增強(qiáng)性內(nèi)容或替換性內(nèi)容來增強(qiáng)或替換反射

（映維網(wǎng) 2021年03月09日）對(duì)于佩戴混合現(xiàn)實(shí)頭顯或握持智能手機(jī)的MR用戶，如果你正在扮演一位手拿屠龍寶刀的勇者角色，當(dāng)你走到鏡子前面，你看到的會(huì)是什么呢？顯然，答案是極客味道十足的頭顯和智能手機(jī)，而這會(huì)瞬間打破你的幻想RPG沉浸感。

名為“Image-based detection of surfaces that provide specular reflections and reflection modification（提供鏡面反射和反射修改的基圖表面檢測(cè)）”的蘋果專利申請(qǐng)則主要針對(duì)這個(gè)問題，其描述了一種檢測(cè)鏡子、玻璃、液體和其他反射表面及其相關(guān)反射的方法。在一個(gè)實(shí)施例中，所述方法包括檢測(cè)用戶或用戶設(shè)備在反射式表面中的反射，然后用增強(qiáng)性內(nèi)容或替換性內(nèi)容來增強(qiáng)或替換反射。

在一個(gè)實(shí)現(xiàn)中，可以首先通過攝像頭確定環(huán)境的視圖，包括鏡子、反光玻璃、液體和其他提供鏡面反射的表面。然后，通過語義分析來識(shí)別物理環(huán)境中的表面或材料，以及確定所述表面或材料的反射特性。

在一個(gè)實(shí)現(xiàn)中，可以利用計(jì)算機(jī)視覺來識(shí)別反射性表面中的設(shè)備、用戶或另一對(duì)象反射。然后，通過語義分析來識(shí)別物理環(huán)境中的表面或材料，以及確定所述表面或材料的反射特性。

在一個(gè)示例中，可以捕獲關(guān)于包含對(duì)象鏡面反射的第一圖像，以及關(guān)于用戶、衣服、電子設(shè)備或任何其他對(duì)象的直視視圖的第二圖像?？梢詫⒌谝粓D像中的對(duì)象鏡面反射與第二圖像中的直視圖進(jìn)行匹配，從而檢測(cè)第一圖像中的鏡面反射。然后，匹配可涉及形狀、大小、顏色、紋理或運(yùn)動(dòng)。

根據(jù)分析出的反射特性，系統(tǒng)可以替換刪減顯示的反射性內(nèi)容。

在一個(gè)實(shí)施例中，當(dāng)握持智能手機(jī)的用戶面對(duì)鏡子、反光玻璃、液體和其他提供鏡面反射的表面時(shí)，顯示屏幕可以用魔杖或光劍來替換鏡面反射中的智能手機(jī)，不顯示任何智能手機(jī)的痕跡。

在一個(gè)實(shí)施例中，當(dāng)佩戴頭顯的用戶面對(duì)鏡子、反光玻璃、液體和其他提供鏡面反射的表面時(shí)，顯示屏幕可以對(duì)鏡面反射中頭顯進(jìn)行刪減和覆蓋修改，并最終呈現(xiàn)出完整的用戶面容而不出現(xiàn)頭顯的痕跡，包括映射用戶的眼睛，眉毛和臉頰等等。

在一個(gè)實(shí)施例中，可以修改調(diào)整原被頭顯/智能手機(jī)遮擋的背景內(nèi)容。例如，可以使用著色技術(shù)、孔填充技術(shù)、內(nèi)容幻覺技術(shù)、光線投射技術(shù)等生成符合情景的背景內(nèi)容。

相關(guān)專利：

Apple Patent | Image-based detection of surfaces that provide specular reflections and reflection modification

https://patent.nweon.com/17971

名為“Image-based detection of surfaces that provide specular reflections and reflection modification”的蘋果專利最初在2020年8月提交，并在日前由美國(guó)專利商標(biāo)局公布。

---
原文鏈接：https://news.nweon.com/83673