Naujosiose „Apple“ ausinėse yra visiškai naujas lustas.
Vision Pro pristato naują Apple silicį, R1 lustą, skirtą visų įmontuotų jutiklių duomenų apdorojimui realiuoju laiku. Jis atsakingas už akių, rankų ir galvos sekimą, vartotojo aplinkos atvaizdavimą be vėlavimo vaizdo perdavimo režimu ir kitas visionOS funkcijas.
Atmetus apdorojimo naštą nuo pagrindinio procesoriaus ir optimizuojant našumą, R1 sumažėja judesio liga iki nepastebimo lygio, naudojant ausines papildytoje realybėje ar virtualioje realybėje režimu. Panagrinėkime, kaip veikia Apple R1 lustas ir kaip jį galima palyginti su pagrindiniu M2 lustu, jo įgalintas Vision Pro funkcijas ir kt.
Kas yra Apple R1 lustas? Kaip tai veikia?
„Apple R1“, o ne pagrindinis M2 lustas, apdoroja nuolatinį duomenų srautą realiuoju laiku, perduodamą „Vision Pro“ iš dvylikos kamerų, penkių jutiklių ir šešių mikrofonų.
Dvi pagrindinės išorinės kameros įrašo jūsų pasaulį, kiekvieną sekundę perkeldamos daugiau nei milijardą pikselių į ausinių 4K ekranus. Be to, pora šoninių kamerų, dvi apačioje sumontuotos kameros ir du infraraudonųjų spindulių šviestuvai stebi rankos judesius iš įvairių padėčių – net esant prastam apšvietimui.
Į išorę nukreiptus jutiklius taip pat yra LiDAR skaitytuvas ir Apple TrueDepth kamera, kuri fiksuoja Jūsų aplinkos gylio žemėlapį, leidžiantį Vision Pro tiksliai išdėstyti skaitmeninius objektus jūsų viduje erdvė. Viduje yra šviesos diodų žiedas aplink kiekvieną ekraną ir dvi infraraudonųjų spindulių kameros stebi jūsų akių judesius, o tai yra „visionOS“ navigacijos pagrindas.
R1 yra pavesta apdoroti duomenis iš visų tų jutiklių, įskaitant inercinius matavimo vienetus, su nepastebimu vėlavimu. Tai labai svarbu, kad erdvinė patirtis būtų sklandi ir patikima.
Kaip Apple R1 lyginamas su M1 ir M2?
M1 ir M2 yra bendrosios paskirties procesoriai, optimizuoti Mac kompiuteriams. R1 yra siauro fokusavimo koprocesorius, sukurtas palaikyti sklandžią AR patirtį. Jis atlieka savo darbą greičiau, nei galėtų M1 ar M2, todėl galima naudotis tokiomis privilegijomis kaip patirtis be atsilikimo.
„Apple“ nenurodė, kiek procesoriaus ir GPU branduolių turi R1, taip pat nenurodė procesoriaus dažnio ir RAM, todėl sunku tiesiogiai palyginti R1, M1 ir M2.
Pagrindiniai R1 domenai yra akių ir galvos sekimas, rankų gestai ir 3D žemėlapių sudarymas realiuoju laiku per LiDAR jutiklį. Iškraunant šias daug skaičiavimo reikalaujančias operacijas, M2 gali efektyviai paleisti įvairius visionOS posistemius, algoritmus ir programas.
Pagrindinės Vision Pro R1 lusto savybės
R1 turi šias pagrindines galimybes:
- Greitas apdorojimas: Specialūs R1 algoritmai ir vaizdo signalo apdorojimas yra optimizuoti jutiklio, kameros ir mikrofono įvestims suprasti.
- Maža delsa: Optimizuota aparatinės įrangos architektūra lemia labai mažą delsą.
- Energijos efektyvumas: Dėl veiksmingos atminties architektūros ir TSMC 5 nm gamybos proceso R1 atlieka tam tikras užduotis naudodamas minimalų energijos kiekį.
Neigiama yra tai, kad „Vision Pro“ dviejų lustų dizainas ir R1 rafinuotumas prisideda prie didelės ausinių kainos ir dviejų valandų baterijos veikimo.
Kokių privalumų R1 suteikia „Vision Pro“?
R1 leidžia tiksliai sekti akis ir ranką, kuri „tiesiog veikia“. Pavyzdžiui, norėdami naršyti visionOS, nukreipkite žvilgsnį į mygtukus ir kitus elementus.
Vision Pro naudoja rankų gestus norėdami pasirinkti elementus, slinkti ir kt. Akių ir rankų sekimo sudėtingumas ir tikslumas leido „Apple“ inžinieriams sukurti mišrios realybės ausines, kurioms nereikia fizinių valdiklių.
R1 sekimo tikslumas ir minimali delsa suteikia papildomų funkcijų, pvz., spausdinimą oru virtualia klaviatūra. R1 taip pat užtikrina patikimą galvos sekimą – tai labai svarbu kuriant vartotoją supančią erdvinę skaičiavimo drobę. Vėlgi, tikslumas čia yra labai svarbus – norite, kad visi AR objektai išlaikytų savo padėtį, nepaisant to, kaip pakreipiate ir pasukate galvą.
Erdvinis suvokimas yra dar vienas veiksnys, prisidedantis prie patirties. R1 paima gylio duomenis iš LiDAR jutiklio ir TrueDepth kameros, atlikdamas 3D žemėlapių sudarymą realiuoju laiku. Išsami informacija leidžia ausinėms suprasti aplinką, pvz., sienas ir baldus.
Tai, savo ruožtu, yra svarbu AR išlikimui, o tai reiškia fiksuotą virtualių objektų vietą. Tai taip pat padeda „Vision Pro“ informuoti vartotoją prieš jam atsitrenkiant į fizinius objektus, taip sumažinant nelaimingų atsitikimų riziką AR programose.
Kaip R1 jutiklio sintezė sumažina AR judesio ligą?
„Vision Pro“ dviejų lustų konstrukcija iškrauna jutiklio apdorojimą iš pagrindinio M2 lusto, kuriame veikia „visionOS“ operacinė sistema ir programos. Pagal Vision Pro pranešimas spaudai, R1 srautu perduoda vaizdus iš išorinių kamerų į vidinius ekranus per 12 milisekundžių arba aštuonis kartus greičiau nei akies mirksėjimas, sumažindamas vėlavimą.
Vėlavimas reiškia delsą tarp to, ką mato fotoaparatai, ir vaizdų, rodomų ausinių 4K ekranuose. Kuo trumpesnis atsilikimas, tuo geriau.
Judesio liga atsiranda, kai pastebimas skirtumas tarp įvesties, kurią smegenys gauna iš jūsų akių, ir to, ką jaučia jūsų vidinė ausis. Tai gali įvykti daugelyje situacijų, įskaitant pramogų parką, a pasiplaukiojimas laivu ar kruiziniu laivu, naudojant VR įrenginį ir pan.
VR gali susargdinti žmones dėl jutimo konflikto, dėl kurio atsiranda judesio ligos simptomų, tokių kaip dezorientacija, pykinimas, galvos svaigimas, galvos skausmas, akių įtempimas, sėdėjimas, vėmimas ir kt.
VR taip pat gali pakenkti jūsų akims dėl akių įtempimo, kurio simptomai yra akių skausmas ar niežėjimas, dvigubas regėjimas, galvos skausmas ir kaklo skausmas. Kai kurie žmonės gali jausti vieną ar daugiau tokių simptomų kelias valandas po ausinių nuėmimo.
Paprastai VR įrenginys turi atnaujinti ekraną bent 90 kartų per sekundę (FPS), o ekrano delsa turi būti mažesnė nei 20 milisekundžių, kad žmonės nesusirgtų judesio liga.
Nurodytas vos 12 milisekundžių vėlavimas, R1 sumažina vėlavimą iki nepastebimo lygio. Nors R1 padeda sumažinti judesio ligos padarinius, kai kurie Vision Pro testuotojai pranešė apie judesio ligos simptomus, kai ausines nešiojo ilgiau nei 30 minučių.
Specializuoti Apple silicio koprocesoriai suteikia didelių pranašumų
„Apple“ nėra svetimi specializuoti procesoriai. Bėgant metams jos silicio komanda gamino mobiliųjų ir stalinių kompiuterių lustus, kurių pramonė pavydi.
„Apple“ silicio lustai labai priklauso nuo specializuotų koprocesorių, kad galėtų valdyti specifines funkcijas. „Secure Enclave“ saugiai tvarko biometrinius ir mokėjimo duomenis, pavyzdžiui, o „Neural Engine“ pagreitina dirbtinio intelekto funkcijas nesugadindamas akumuliatoriaus.
Tai puikūs pavyzdžiai to, ką galima pasiekti turint labai sutelktą koprocesorių tinkamam užduočių rinkiniui, palyginti su. viskam naudojant pagrindinį procesorių.