
Noong Biyernes, sinabi ng crystal ball-wielding analyst ng TF International na si Ming-Chi Kuo na ang AR headset ng Apple ay gagamit ng eye tracking para makita ang mga paggalaw ng mata, pagpikit, at iba pang pisikal na paggalaw na gagamitin para sa input ng user na pinapalitan ang pangangailangan para sa mga handheld controller. Ang tala ni Kuo sa mga kliyente noong Biyernes ay nagsabi, "Sa kasalukuyan, ang mga user ay pangunahing nagpapatakbo ng Head Mounted Display (HMD), karamihan sa mga ito ay mga VR device, gamit ang mga handheld controllers," idinagdag ni Kuo na "Ang pinakamalaking hamon sa ganitong uri ng operasyon ay hindi ito nagbibigay ng maayos na karanasan ng user. Naniniwala kami na kung ang HMD ay gumagamit ng isang eye-tracking system, magkakaroon ng ilang mga pakinabang." Maaaring gamitin ang data ng paggalaw ng mata upang payagan ang mga larawan at nilalamang nasa screen na lumipat nang naka-sync sa mga mata ng isang user.
Sa pamamagitan ng pagsubaybay sa mata, ang isang gumagamit ay maaaring makakuha ng higit pang impormasyon tungkol sa isang bagay sa pamamagitan ng pagtitig dito sa loob ng mahabang panahon. Maaaring i-activate ang mga menu sa pamamagitan ng pag-blink. At sa pamamagitan ng pagsubaybay sa posisyon ng mga mata ng isang user, maaaring bumaba ang resolution ng headset sa mga lugar na hindi nakatutok kaya binabawasan ang pangangailangan para sa kapangyarihan sa pagpoproseso kung saan hindi ito kailangan. Sinabi rin ni Kuo na ang pagkilala sa iris ay maaaring gamitin upang i-verify at patotohanan ang mga pagkakakilanlan ng mga gumagamit. Ang tampok ay maaari ding gamitin upang makumpleto ang isang transaksyon na binayaran para sa paggamit mansanas Magbayad.
Nag-file ang Apple ng ilang mga patent na may kinalaman sa teknolohiya sa pagsubaybay sa mata. Maaaring gamitin ang mga ito sa mixed reality device na inaasahan ni Kuo na ilalabas ng Apple sa susunod na taon para sa humigit-kumulang $1,000. Gumagamit ang bahagi ng VR ng 3D at iba pang mga visual na trick para ipakita na ang user ay nasa ibang lugar at nasa isang sitwasyong parang makatotohanan. Maaaring siya ay nasa likod ng gulong ng isang karera ng kotse sa isang sikat na track ng karera sa mundo, o sa batter's box sa Yankee Stadium na nakaharap sa isang 100 MPH fastball mula sa inaasam-asam ni Marlins na si Sixto Sanchez. Gamit ang AR, ang data at impormasyon ay inilalagay sa ibabaw ng isang real-world na imahe. Maaaring sundin ng isang user ang mga arrow upang maglakad mula sa puntong "A" hanggang sa puntong "B" gamit ang totoong world view ng sidewalk sa screen. Maaaring ipakita ng isang kahon ang oras at temperatura habang ang isang stock ticker ay maaaring magpakita ng mga real-time na quote sa display.
Pagkatapos ng mixed-reality device sa susunod na taon, makikita natin ang Apple Glass na ipinakilala noong 2025 na may mga AR contact lens na posibleng binuo para sa isang release sa 2030. Sa unang bahagi ng buwang ito, sinabi ni Kuo na ang mixed reality device ay bibigyan ng 15 camera kasama ang "makabagong biometrics," Sinabi rin niya na ang mixed reality headset ay gagamit ng mga Micro-OLED na display at optical module ng Sony upang maghatid ng "see-through na karanasan sa AR," at magbibigay din sa user ng "isang karanasan sa VR." Ang "immersive na karanasan" sa mixed reality device ay magiging mas mahusay kaysa sa mga inaalok ng mga kalabang headset sa presyong katumbas ng halaga ng isang mataas na presyo na modelo ng iPhone.
Huwebes lamang, tinalakay ng Apple ang isang patent application na tumatalakay sa isang paraan na pipigil sa mga user ng Apple Headset na magkaroon ng aksidenteng epekto sa mga real-world na bagay habang inilalagay sila ng VR sa isang gawa-gawang mundo. Sa patent application, isinulat ng Apple, ""Halimbawa, ang user ay maaaring ganap na isawsaw sa VR na tumutugma sa isang pre-historic na mundo na puno ng mga dinosaur," sabi ng Apple. "Habang ang virtual na pre-historic na mundo ay maaaring kulang sa mga kasangkapan sa sala, ang sala kung saan matatagpuan ang user ay patuloy na may kasamang isang kape mesa.”
Ang nakaraang solusyon ng Apple ay sabihin sa gumagamit na tanggalin ang kanyang headset kapag ang katotohanan ay malapit nang manghimasok sa virtual na imahe. Ngunit maaaring hindi ito magawa ng mga user nang mabilis. "Gayunpaman, habang ang mga karanasan ay nagiging mas nakaka-engganyo, maaaring hindi maramdaman ng user ang gayong hindi kanais-nais na mga pakikipag-ugnayan nang sapat na mabilis upang maiwasan ang mga ito," sabi nito. "Bukod dito, ang biglang pag-alis ng electronic device sa panahon ng isang karanasan ay nakakabawas sa karanasang iyon. Dahil dito, kanais-nais na tugunan ang mga alalahanin na nauugnay sa mga hindi kanais-nais na pakikipag-ugnayan na ito habang pinapaliit din ang anumang negatibong epekto sa karanasan."
Ang bagong solusyon ng Apple ay nangangailangan ng isang picture-in-picture effect na magaganap. Kung saan ang nagsusuot ng "Apple Glass" ay nasa panahon ng dinosaur, ang paggamit ng picture-in-picture ay magbibigay-daan sa user na makakita ng live na view ng kanilang totoong buhay na kapaligiran. Ang layunin ng Apple ay panatilihin ang user sa karanasan sa AR hanggang sa dapat siyang maalerto sa kanyang totoong buhay na kapaligiran.