2020年09月25日美國專利局新申請AR/VR專利報告
1. 《Magic Leap Patent | Method And System For Large Field Of View Display With Scanning Mirror Having Optical Power（包括光功率掃描鏡的大視場顯示器的方法和系統）》
圖像顯示系統可以包括：配置為發射未準直光線的多個光源；以及目鏡波導，其具有配置為接收不同角度的光束的輸入端口。所述圖像顯示系統同時包括掃描鏡，其具有正光學功率的表面，并配置為接收由多個光源發射的光。具有正光功率的表面配置為準直由多個光源發射的光線，從而形成多個準直光束并將多個準直光束引導到輸入端口。
2. 《Magic Leap Patent | Method and system for performing simultaneous localization and mapping using convolutional image transformation（利用卷積圖像變換來實現同時定位與映射的方法與系統）》
專利描述了根據兩個圖像計算單應矩陣的增強現實設備與方法。一種方法可包括根據第一camera姿態接收的第一圖像和根據第二camera姿態接收第二圖像，基于第一圖像產生第一點云，基于第二圖像產生第二點云，然后向神經網絡提供第一點云和第二點云，并由神經網絡生成基于第一點云和第二點云的單應矩陣。對于神經網絡的訓練，可以生成多個點，確定3D軌跡，對3D軌跡進行采樣以獲得camera姿態，將點投影到2D平面上，然后比較生成的單應矩陣與ground-truth單應矩陣，并根據這一比較來修改神經網絡。
3. 《Magic Leap Patent | Virtual And Augmented Reality Systems And Methods Having Improved Diffractive Grating Structures（具有優化衍射光柵結構的虛擬現實和增強現實系統和方法）》
專利描述了一種用于3D顯示系統的優化衍射結構。優化的衍射結構包括位于波導基板和上方光柵表面之間的中間層。上方光柵表面包括對應于第一折射率值的第一材料，底層包括對應于第二折射率值的第二材料，并且基板包括對應于第三折射率值的第三材料。
4. 《Magic Leap Patent | Display System And Method For Providing Variable Accommodation Cues Using Multiple Intra-Pupil Parallax Views Formed By Light Emitter Arrays（利用由光發射器陣列形成的多個光瞳內視差視圖來提供可變視覺調節線索的顯示系統和方法）》
顯示系統配置成將多個視差不同的光瞳內圖像引導到用戶眼睛。視差不同的光瞳內圖像提供虛擬對象的不同視差，并且從不同的角度觸及瞳孔。作為總體計算，形成圖像的光波前近似于連續的發散波前，并且根據光瞳內圖像之間的視差差量為用戶提供可選的視覺調節提示。可以使用選擇性地調節圖像光進入眼睛的快門陣列來選擇視差差量。陣列中的每個開啟快門提供不同的光瞳內圖像，并且開啟快門的位置提供圖像之間所需的視差差量。
5. 《Facebook Patent | High Compliance Microspeakers For Vibration Mitigation In A Personal Audio Device（用于個人音頻設備減振的高合規微型揚聲器）》
專利描述的音頻系統包括一個配置成發出聲音的揚聲器。所述揚聲器包含在外殼中，所述外殼形成在揚聲器相對側上的前腔和后腔。所述腔體的至少一個端口包括從第一腔體到第二端口的聲音輸出的至少一部分。聲音的第二部分與第一部分基本上不同步。音響系統的等效聲量大于前腔的10倍，大于后腔的10倍。
6. 《Facebook Patent | Systems And Methods Of Rendering Real World Objects Using Depth Information（使用深度信息渲染真實世界對象的系統和方法）》
專利描述的系統可以包括設備和圖形處理單元（GPU）。設備可以配置為從與第一視圖相對應的一個或多個攝像頭接收第一圖像，以及來自與第二視圖相對應的一個或多個攝像頭的第二圖像。GPU可以包括運動估計器，并且配置為接收第一圖像和第二圖像。運動估計器可以配置為確定第一圖像的第一視差偏移和第二圖像的第二視差偏移。設備可以配置為生成用于使用第一圖像和第二圖像來渲染3D圖像的第一深度緩沖區和第二深度緩沖區。
7. 《Facebook Patent | Mould Pair Having Alignment Surfaces（具有對準表面的模具對）》
專利描述了一種用于模制光學元件的模具對。模具對包括具有第一表面的第一模具和具有第二表面的第二模具。所述第一表面包括用于模制光學元件的第一光學表面的模制部分，以及用于與第二模具對準的對準部分。對準部分圍繞模塑部分延伸。所述第二表面包括用于模制所述光學元件的相對光學表面的模制部分，以及用于通過與第一表面的對準部分接觸來與第一模具對準的對準部分。當模具組合在一起時，它們會自動對齊。相應的成型設備和方法可以使用所述模具對來制造各種光學元件。
8. 《Microsoft Patent | Relative Spatial Localization Of Mobile Devices（移動設備的相對空間定位）》
為了獲得多臺移動設備之間的相對定位，第一移動設備在時間t1觀察第一移動設備攝像頭視場內的第二移動設備，在t1確定第一移動設備的第一位置，并接收第二移動設備在t1的第二位置。第一移動設備至少部分地根據第一位置和對第二移動設備的觀察來確定關于在第一時刻相對于第二移動設備的第一移動設備方向信息。第一移動設備至少部分地根據第二位置和方位信息來識別與移動設備坐標系統相關的兩個約束。一旦累積了至少六個約束，系統可以計算出第一移動設備相對于第二移動設備的姿態。
9. 《Microsoft Patent | Generation Of Digital Twins Of Physical Environments（生成物理環境數字孿生）》
專利描述了一種用于生成物理環境的數字孿生的方法。從深度傳感器組件接收物理環境的深度數據。然后至少根據接收到的深度數據生成物理環境的三維映射，然后基于生成的三維映射生成物理環境的數字孿生。接收關于三維映射中的一個或多個聯網設備的位置信息。一個或多個聯網設備中的每一個都與聯網設備的一個數字孿生相關聯。在生成的三維映射中為每個聯網設備建立坐標位置。每個建立的坐標位置都與一個設備標識相關聯。
10. 《Microsoft Patent | Predicting Three-Dimensional Articulated And Target Object Pose（|預測三維關節和目標對象姿態）》
專利描述的數據處理系統包括具有相關內存的處理器，所述處理器配置成使用所述內存的部分來執行指令，并致使處理器在分類時從圖像源接收輸入圖像幀。目標和輸入對象包括輸入幀。處理器同時使用經過訓練的神經網絡來處理輸入圖像幀，所述神經網絡配置成對根據輸入圖像幀中的每個輸入單元預測鉸接對象的三維關節對象姿態。處理器從神經網絡輸出三維關節目標姿態和三維目標對象姿態。
11. 《Microsoft Patent | Virtualized Product Configuration And Quotation System（虛擬化產品配置和報價系統）》
通過在頭顯設備顯示對象的三維虛擬視圖，專利描述了用于允許配置、價格、報價（CPQ）系統生成可配置產品的可視化效果。用戶可以通過執行頭顯設備能夠識別的手勢來與顯示視圖交互。實施例允許用戶添加、修改或移除可配置產品的虛擬視圖。實施例同時可以允許通過適當的手勢操作在不同的配置選項之間快速循環。實施例配置成在視場內提供價格信息，并且隨著用戶改變活動配置而更新。
12. 《Microsoft Patent | Visualization Tool For Interacting With A Quantum Computing Program（用于與量子計算程序交互的可視化工具）》
專利描述了一種用于協助用戶探索量子計算機程序的技術。所述技術首先從執行量子計算機程序的量子系統仿真器接收量子比特狀態信息。量子比特狀態信息描述在量子計算機程序中的指定分析點處一個或多個相應量子比特的一個或多個狀態。然后，所述技術生成一個三維圖形描述，并提供量子位狀態信息的可視化。三維圖形描述包括允許用戶與三維圖形描述交互的至少一個圖形控制元素。然后，所述技術在顯示設備顯示三維圖形描述。在一個實施例中，顯示設備由與混合現實系統相關聯的頭戴式顯示器提供。
13. 《Microsoft Patent | Augmented Two-Stage Hand Gesture Input（增強的兩階手勢輸入）》
一種用于增強兩階段手勢輸入的方法包括接收用戶手部的手部追蹤數據。根據滿足第一階段手勢標準而從手部追蹤數據導出的一個或多個參數，手勢識別機器識別用戶已經執行了第一階段手勢。響應于識別第一階段手勢，將提示執行第二階段手勢的可供性提供給用戶。根據滿足第二階段手勢標準而從手部追蹤數據導出的一個或多個參數，手勢識別機器識別用戶已經執行了第二階段手勢。響應于識別第二階段手勢，顯示圖形用戶界面元素。
14. 《Microsoft Patent | Position based Energy Minimizing Function（基于位置的能量最小化函數）》
專利描述計算機系統包括輸入系統和處理器，處理器可配置成根據從輸入系統接收的輸入數據來控制虛擬操縱器。處理器同時配置成，確定至少包括虛擬操縱器的初始狀態和虛擬對象的初始狀態的系統的初始狀態，檢測虛擬操縱器的一部分和虛擬對象之間的至少一個接觸點。處理器同時配置成計算虛擬對象的后續狀態，所述虛擬對象根據系統初始狀態確定的一個或多個位置量和根據系統后續狀態確定的一個或多個位置量所定義的一組能量或殘差最小化基于位置的能量最小化函數。
15. 《Microsoft Patent | Varifocal Display With Fixed-Focus Lens（帶固定焦點透鏡的變焦顯示器）》
專利描述的近眼顯示系統包括配置成發射顯示光的顯示投影儀、光纖、固定焦點透鏡、以及可變光功率的變焦透鏡。光纖配置成接收顯示光并向用戶釋放顯示光。固定焦點透鏡用于調整從光導釋放的顯示光的會聚。變焦透鏡與固定焦點透鏡串聯布置，并且配置成響應于聚焦偏置而改變從光纖釋放的顯示光的會聚。
16. 《Microsoft Patent | Near Eye Display (Ned) Device Housing Shell Integrated With Molded Boss Clusters For Precision Mounting Of Hardware Components（近眼顯示設備外殼與模制凸臺群集集成以用于精確裝接硬件組件）》
專利描述的一種近眼顯示設備外殼與模制凸臺集群集成，從而用于精確地裝接硬件組件。專利描述地技術包括直接在一個或多個預成型凸臺群上形成殼體，所述凸臺群插入殼體型芯的腔中。例如，在預先模制的凸臺群已插入型腔中的情況下，選定的外殼材料可在外殼型芯上進行熱壓縮模塑。預成型凸臺集群的單個凸臺包括一個或多個用于裝接近眼顯示設備的各種硬件組件。
17. 《Apple Patent | Dynamic Focus 3d Display（動態焦點3D顯示器）》
專利描述了一種為虛擬現實和/或增強現實提供動態焦點的直接視網膜投影系統。直接視網膜投射系統逐像素地將圖像掃描到用戶的視網膜。這使得當圖像掃描到視網膜時，光學能夠動態影響單個像素。專利同時描述了可在直接視網膜投影儀系統中使用的動態聚焦組件和技術，從而在圖像掃描到眼睛時動態地和正確地聚焦VR圖像中的每個像素。這允許以不同距離出現在場景中的對象以正確的深度投射到用戶眼睛。
18. 《Apple Patent | Head-Mounted Display Apparatus For Retaining A Portable Electronic Device With Display（可容納帶有顯示屏的便攜式電子設備的頭戴式顯示裝置）》
專利描述了一種允許用戶將手持便攜式電子設備與單獨的頭戴式設備耦合和分離的系統和方法。便攜式電子設備可以物理耦合至頭顯設備。便攜式電子設備和頭顯設備可以彼此通信和操作。可以允許每個設備將其功能和/或服務擴展到另一個設備，以便增強，增加和/或消除頭顯設備和便攜式電子設備之間的冗余功能。
19. 《Apple Patent | Virtual Paper（虛擬報紙）》
在一個實施例中，包括一個或多個處理器、非瞬時存儲器和一個或多個顯示器的設備執行將立體虛擬內容混合到有界表面中的操作。相關方法包括，在本機用戶計算機生成現實環境中顯示有界曲面，其中根據表征本機用戶計算機生成現實環境的第一組世界坐標來顯示有界表面。所述方法同時包括在有界表面的第一側周長內顯示第一立體虛擬對象。其中，根據與表征本機用戶計算機生成現實環境的第一組世界坐標不同的第二組世界坐標來顯示第一立體虛擬對象。
20. 《Qualcomm Patent | Rendering metadata To Control User Movement based Audio Rendering（渲染元數據以控制基于用戶移動的音頻渲染）》
專利描述的技術用于渲染元數據以控制基于用戶移動的音頻呈現。包括存儲器和一個或多個處理器的設備可以配置來執行所述技術。存儲器可以配置成存儲代表聲場的音頻數據。一個或多個處理器可以耦合到存儲器，并且配置成根據用戶移動的指示、用于渲染表示聲場的音頻數據的指示來獲得指示用于啟用或禁用適配的渲染元數據。
21. 《Sony Patent | Quantization Step Parameter For Point Cloud Compression（用于點云壓縮的量子步長參數）》
專利描述了一種參數化點云壓縮算法屬性編碼量化方案的技術。所述算法基于定點算法，在給定用戶輸入量化參數（QP）的情況下，以定點表示法計算量化步長（QS）。
22. 《Sony Patent | Head-Mountable Display System（頭戴式顯示系統）》
專利描述一種生成用于相對于虛擬顯示屏位置顯示的立體圖像的方法，所述方法包括設置用于顯示立體圖像的虛擬顯示屏位置，使得一個或多個虛擬顯示屏的深度簡檔近似于要由所述立體圖像顯示的虛擬場景中的一個或多個對象的深度簡檔，以及生成具有適合于由設置步驟設置的虛擬顯示屏位置的圖像視差以用于顯示的立體圖像。
23. 《Sony Patent | Method And System For Generating An Image（用于生成圖像的方法和系統）》
專利描述了一種從虛擬camera視角生成圖像的方法和系統，所述方法包括獲得被攝體的多個源圖像，捕捉源圖像的每個源攝像頭的姿態數據，以及虛擬camera的姿態。每個源圖像基于對應源攝像頭的姿態和虛擬camera的姿態的差異而失真。基于對應源攝像頭的姿態和虛擬camera的姿勢之間的相似性，為每個失真圖像確定權重。然后根據權重將失真的圖像混合在一起，并從虛擬camera的角度形成被攝體的圖像。
24. 《Sony Patent | Point Cloud Global Tetris Packing（點云全局方塊打包）》
專利描述了一種將三維點云數據映射到二維表面以進一步有效地進行時間編碼的方法。點云全局方塊打包利用三維曲面片來表示點云，并執行三維面片表面數據到二維畫布圖像的時間一致性全局映射。
25. 《Sony Patent | Point Cloud Geometry Padding（點云幾何填充）》
專利描述了一種點云幾何填充方法。所述方法在壓縮的占用映射中搜索重建點以執行幾何填充，而不是使用未壓縮的占用映射。
26. 《Sony Patent | Varying Effective Resolution By Screen Location By Altering Rasterization Parameters（通過變更光柵化參數來改變屏幕位置的有效分辨率）》
在圖形處理中，接收表示虛擬空間場景的一個或多個頂點數據。在頂點執行Primitive Assembly，從而計算頂點從虛擬空間到視口的投影。掃描轉換確定多個像素中的哪個像素屬于已經轉換為屏幕空間坐標的圖元的一部分。每個圖元的粗略光柵化確定圖元重疊的子部分。與基元重疊子部分相關聯的元數據確定子部分的像素分辨率。元數據用于處理子部分的像素并生成用于視口的最終像素值，從而使得兩個不同子部分中的部分場景具有不同的像素分辨率。
27. 《Sony Patent | Signal Processing Device And Signal Processing Method（信號處理設備和信號處理方法）》
專利描述了一種信號處理裝置，其包括：顯示控制單元，用于致使顯示器顯示與指定位置對應的圖像；聲音收集信號輸入單元，用于輸入用戶聲音的聲音收集信號；聲學信號處理單元，用于執行第一聲學信號處理，從而再現用戶聲音的聲場；以及發聲控制單元，用于致使揚聲器發出處理過的音頻信號。
28. 《Sony Patent | Establishing And Using Virtual Assets On Tangible Objects In Augmented Reality (Ar) And Virtual Reality (Vr)（在增強現實和虛擬現實中建立虛擬asset并將其用于有形對象之上）》
一種方法包括識別有形對象，并以用戶可見的方式在所述有形對象建立虛擬疊加層。檢測用戶與虛擬疊加層的交互，并使用所述交互作為輸入。一種系統包括顯示器和與顯示器通信的裝置。
29. 《Sony Patent | Input Device（輸入設備）》
專利描述的輸入裝置包括具有一個外表面并設有多個發光部分的目標追蹤部分；構成目標追蹤部分外表面的外殼；第一基板；至少一個光源安裝在第一基板；以及第一導光構件，所述第一導光構件將來自至少一個光源的光引導到所述殼體外表面上的多個發光部分。
30. 《Sony Patent | Eye Tracking To Adjust Region-Of-Interest (Roi) For Compressing Images For Transmission（索尼專利|眼睛跟蹤調整感興趣區域（Roi）壓縮圖像傳輸）》
注視點追蹤數據可以表示用戶的一個或多個感興趣區域。選擇性地壓縮發送的一個或多個圖像，使得對于一個或多個感興趣區域之外的圖像部分用更少的比特進行數據傳輸。
31. 《Sony Patent | Heads-Up Display System And Method（頭戴式顯示系統和方法）》
專利描述了一種用于通過平視顯示器向用戶提供信息的系統，所述系統包括第一顯示器，第一顯示器用于向用戶顯示第一內容的圖像。所述系統包括注視點追蹤單元，其可用于識別用戶相對于第一內容的一個或多個元素的注視方向。所述系統同時內容生成單元，其可操作為根據所識別的注視方向生成第二內容并向用戶顯示。所述系統同時包括可操作用于向用戶顯示第二內容的平視顯示器。
32. 《Sony Patent | Image Display Apparatus（圖像顯示裝置）》
根據本技術實施例的圖像顯示設備包括顯示表面、圖像顯示部分、獲取部分和遮光部分。顯示表面具有透明度。圖像顯示部分在顯示表面顯示顯示圖像。獲取部分獲取關于用戶眼睛的眼睛信息。遮光部分根據獲得的眼睛信息和關于顯示圖像的信息，在與顯示圖像顯示區域相對應的區域中形成遮光區域。
33. 《Intel Patent | Hybrid Stereo Rendering For Depth Extension In Dynamic Light Field Displays（用于在動態光場顯示器擴展深度的混合立體感渲染）》
專利描述了一種用于混合渲染的組件和方法。例如，一個實施例包括：識別用戶眼睛的左視圖和右視圖；生成用于左視圖和右視圖的至少一個深度圖；計算深度固定閾值，包括最小深度值和最大深度值；根據最小深度值和最大深度值變換深度圖；以及執行視圖合成，使用變換后的深度圖來渲染左視圖和右視圖。
34. 《Intel Patent | Technology To Encode 360 Degree Video Content（360度視頻內容編碼技術）》
專利描述的方法可以根據每個攝像頭確定相對于全景視頻內容的興趣水平，識別多個攝像頭中的興趣水平低于閾值的攝像頭子集，并降低所述攝像頭的功耗。另外，專利描述的技術可以確定與全景視頻內容相關聯的投影格式，識別投影格式中的一個或多個不連續邊界，并根據不連續邊界來修改與全景視頻內容相關聯的編碼方案。另外，可以將編碼幀分配給時間可伸縮性層，所述時間可伸縮性層的優先級高于分配了異步空間扭曲幀的層的優先級。另外，專利描述的技術可以降低魚眼內容中活動區域和非活動區域之間的邊界的編碼復雜度。
35. 《Intel Patent | Compensating For High Head Movement In Head-Mounted Displays（補償頭顯的高速頭部運動）》
當頭部運動速度超過系統的處理能力時，顯示縮小的描述。作為一個例子，可以使用粗略像素著色來降低分辨率，以便以頭部移動的速度創建新的描繪。根據另一實施例，僅以全分辨率處理用戶正在注視的區域，并且以較低分辨率處理描繪其余部分。在另一個實施例中，可以模糊或灰化背景描繪以減少處理時間。
36. 《Nvidia Patent | Foveated Display For Augmented Reality（用于增強現實的注視點顯示器）》
專利描述的增強現實顯示系統包括用于注視點圖像區域的第一光束路徑、用于外圍顯示圖像區域的第二光束路徑，以及瞳孔位置追蹤邏輯。追蹤邏輯產生控制信號以設置通過全息光學元件感知的注視點位置和外圍區域。