在今年的 WWDC23 上官宣 Apple Vision Pro 期間，蘋果推出了一項(xiàng)名為 Eyesight 的特定功能。蘋果指出：“Apple Vision Pro 可幫助你與周圍的人保持聯(lián)系。EyeSight 會展現(xiàn)你的眼睛，并讓附近的人知道你何時使用應(yīng)用程序或完全沉浸在體驗(yàn)中。當(dāng)有人走近時，Apple Vision Pro 同時讓你看到這個人，并向?qū)Ψ秸故灸愕难劬Α！?/p>
從技術(shù)上講，蘋果公司的 Mike Rockwell 這樣描述 Eyesight：“我們還認(rèn)真考慮了其他人在佩戴 Vision Pro 時如何與你互動。Eyesight 利用獨(dú)特的弧形 OLED 面板和光柵透鏡，將你眼睛的正確視角投射到每個注視你的人身上。結(jié)果是 3D 顯示屏，使設(shè)備看起來透明。”
近日，歐洲專利局公布了微軟一項(xiàng)新專利，標(biāo)題為“控制計算機(jī)生成的面部體驗(yàn)”。
微軟指出，他們的發(fā)明涉及顯示計算機(jī)生成的面部表情。其中一個示例提供了一種顯示計算機(jī)生成的面部表情的方法。該方法包括接收表情數(shù)據(jù)，以及至少基于表情數(shù)據(jù)為用戶的眼睛區(qū)域生成一個或多個面部表情。該方法還包括在頭戴式設(shè)備的外向顯示器上顯示眼睛區(qū)域的一個或多個面部表情。
微軟專利圖 11A 和 11B 說明了一個示例場景，其中激活頭戴式設(shè)備上的外部顯示屏，并在顯示屏上打開計算機(jī)生成的面部表情，特別是在眼睛區(qū)域。
微軟專利圖 12 顯示了一個示例頭戴式設(shè)備的框圖，該設(shè)備被配置為顯示計算機(jī)生成的面部表情；圖 13 示出了顯示計算機(jī)生成的面部表情的示例方法的流程圖。
該專利中公開的示例涉及利用包含一個或多個面部追蹤傳感器的面部追蹤系統(tǒng)，來控制計算機(jī)生成的面部表情的顯示。
此外，從每個面部追蹤傳感器接收隨時間變化的數(shù)值，并且基于接收到的數(shù)據(jù)確定每個面部追蹤傳感器的數(shù)值范圍，該數(shù)值范圍包括在一段時間內(nèi)（例如在滾動時間窗口內(nèi)）接收到的最小值和最大值。對值范圍和接收傳感器值進(jìn)行處理，以將接收的傳感器值轉(zhuǎn)換為混合形狀映射，其中混合形狀映射對應(yīng)于值范圍內(nèi)傳感器值的位置。
然后，至少基于混合形狀映射確定表達(dá)式數(shù)據(jù)，并將其提供給一個或多個設(shè)備進(jìn)行呈現(xiàn)。以這種方式，一組面部追蹤傳感器可以共同用于感知用戶表情的整體近似值，從而控制以化身形式呈現(xiàn)的表情。化身可以呈現(xiàn)給傳感器設(shè)備用戶以外的其他人。這可能有助于 AR 和/或 VR 環(huán)境中的人際交流。
此外，在 2022 年 8 月，Meta 的一項(xiàng)專利申請也顯示該公司正在開發(fā)一種在頭顯設(shè)備中查看用戶眼睛的方法，如下圖專利所示。
來源：新浪VR