Mikä on Applen R1-siru ja miten se on verrattuna M1:een ja M2:een?

Vision Pro tuo uuden Applen piin, R1-sirun, joka on omistettu kaikkien sisäisten antureiden reaaliaikaiseen tietojenkäsittelyyn. Se vastaa silmien, käsien ja pään seurannasta, käyttäjän ympäristön viivettömästä renderöimisestä videon läpivientitilassa ja muista visionOS-ominaisuuksista.

Purkamalla prosessointitaakkaa pääprosessorilta ja optimoimalla suorituskykyä R1 vähentää matkapahoinvointia huomaamattomasti, käytettiinpä kuulokkeita lisätyssä todellisuudessa tai virtuaalitodellisuudessa -tilassa. Tutkitaan kuinka Apple R1 -siru toimii ja miten sitä verrataan M2-pääsiruun, sen mahdollistamia Vision Pron ominaisuuksia ja paljon muuta.

Mikä on Applen R1-siru? Kuinka se toimii?

Apple R1, ei tärkein M2-siru, käsittelee jatkuvan reaaliaikaisen tiedonsyötön Vision Prolle kahdellatoista kameralla, viidellä anturilla ja kuudella mikrofonilla.

Kaksi ulkoista pääkameraa tallentavat maailmaasi ja siirtävät yli miljardi pikseliä kuulokkeiden 4K-näytöille sekunnissa. Tämän lisäksi kaksi sivukameraa, kaksi pohjaan asennettua kameraa ja kaksi infrapunavalaisinta seuraavat käden liikettä useista eri asennoista – jopa heikossa valaistuksessa.

Ulospäin suunnatut anturit sisältävät myös LiDAR-skannerin ja Applen TrueDepth-kameran, jotka tallentavat ympäristösi syvyyskartta, jonka avulla Vision Pro voi sijoittaa digitaaliset kohteet tarkasti sinun tilaa. Sisäpuolella LED-rengas jokaisen näytön ympärillä ja kaksi infrapunakameraa seuraavat silmäsi liikettä, mikä muodostaa visionOS-navigoinnin perustan.

R1:n tehtävänä on käsitellä tietoja kaikista näistä antureista, mukaan lukien inertiamittausyksiköt, huomaamattomalla viiveellä. Tämä on äärimmäisen tärkeää, jotta tilakokemuksesta tulee sujuvaa ja uskottavaa.

Miten Apple R1 verrataan M1:een ja M2:een?

M1 ja M2 ovat yleiskäyttöisiä suorittimia, jotka on optimoitu Mac-tietokoneille. R1 on kapea-alainen apuprosessori, joka on suunniteltu tukemaan sujuvaa AR-kokemusta. Se tekee työnsä nopeammin kuin M1 tai M2 voisivat, mikä mahdollistaa etuja, kuten viivettömän kokemuksen.

Apple ei ole täsmentänyt kuinka monta CPU- ja GPU-ydintä R1 ei ole tarkentanut suorittimen taajuutta ja RAM-muistia, mikä tekee suorasta vertailusta R1:n, M1:n ja M2:n välillä vaikeaa.

R1:n ensisijaiset toimialueet ovat silmien ja pään seuranta, käsieleet ja reaaliaikainen 3D-kartoitus LiDAR-anturin kautta. Laskennallisesti vaativien toimintojen purkaminen antaa M2:n suorittaa erilaisia ​​visionOS-alijärjestelmiä, algoritmeja ja sovelluksia tehokkaasti.

Vision Pron R1-sirun tärkeimmät ominaisuudet

R1:ssä on seuraavat keskeiset ominaisuudet:

• Nopea käsittely: R1:n erikoisalgoritmit ja kuvasignaalin käsittely on optimoitu anturi-, kamera- ja mikrofonitulojen ymmärtämiseen.
• Alhainen viiveaika: Optimoitu laitteistoarkkitehtuuri johtaa erittäin alhaiseen latenssiin.
• Tehotehokkuus: Tehokkaan muistiarkkitehtuurinsa ja TSMC: n 5 nm: n valmistusprosessin ansiosta R1 hoitaa tietyt tehtävät käyttämällä mahdollisimman vähän energiaa.

Haittapuolena on, että Vision Pron kaksisiruinen muotoilu ja R1:n hienostuneisuus vaikuttavat kuulokkeiden korkeaan hintaan ja kahden tunnin akun kestoon.

Mitä etuja R1 tuo Vision Prolle?

R1 mahdollistaa tarkan silmien ja käsien seurannan, joka "vain toimii". Voit esimerkiksi navigoida visionOS: ssä suuntaamalla katseesi painikkeisiin ja muihin elementteihin.

Vision Pro käyttää käsieleitä valitaksesi kohteita, vierittääksesi ja paljon muuta. Silmien ja käsien seurannan kehittyneisyys ja tarkkuus ovat antaneet Applen insinöörille mahdollisuuden luoda sekatodellisuuden kuulokkeet, jotka eivät vaadi fyysisiä ohjaimia.

R1:n seurantatarkkuus ja minimaalinen viive mahdollistavat lisäominaisuuksia, kuten ilmakirjoituksen virtuaalisella näppäimistöllä. R1 tarjoaa myös luotettavan pään seurannan, joka on kriittistä käyttäjää ympäröivän spatiaalisen laskentapohjan luomisessa. Jälleen, tarkkuus on avainasemassa – haluat kaikkien AR-objektien säilyttävän asemansa riippumatta siitä, kuinka kallistat ja käännät päätäsi.

Tilatietoisuus on toinen tekijä, joka vaikuttaa kokemukseen. R1 ottaa syvyystiedot LiDAR-anturista ja TrueDepth-kamerasta suorittaen reaaliaikaisen 3D-kartoituksen. Syvyystietojen avulla kuulokemikrofoni ymmärtää ympäristöään, kuten seiniä ja huonekaluja.

Tämä puolestaan ​​on tärkeää AR: n pysyvyyden kannalta, mikä viittaa virtuaaliobjektien kiinteään sijoitteluun. Se auttaa myös Vision Prota ilmoittamaan käyttäjälle ennen kuin hän törmää fyysisiin esineisiin, mikä auttaa vähentämään AR-sovellusten onnettomuusriskiä.

Kuinka R1 Sensor Fusion lieventää AR-liikepahoinvointia?

Vision Pron kaksisiruinen rakenne kuormittaa anturin käsittelyn M2-pääsirulta, joka käyttää visionOS-käyttöjärjestelmää ja sovelluksia. Mukaan Vision Pro -lehdistötiedote, R1 suoratoistaa kuvat ulkoisista kameroista sisäisille näytöille 12 millisekunnissa eli kahdeksan kertaa nopeammin kuin silmänräpäys minimoi viiveen.

Viive viittaa viiveeseen kameran näkemän ja kuulokkeiden 4K-näytöillä näkyvien kuvien välillä. Mitä lyhyempi viive, sitä parempi.

Liikepahoinvointi tapahtuu, kun aivosi silmistäsi vastaanottaman signaalin ja sisäkorvasi aistimien välillä on havaittava viive. Se voi tapahtua monissa tilanteissa, mukaan lukien huvipuistossa, a vene- tai risteilymatkaVR-laitetta käytettäessä jne.

VR voi saada ihmiset sairaaksi aistiristiriidan vuoksi, mikä johtaa matkapahoinvointiin, kuten desorientaatioon, pahoinvointiin, huimaukseen, päänsärkyyn, silmien rasitukseen, istumiseen, oksentamiseen ja muihin.

VR voi myös vahingoittaa silmiäsi silmien rasituksen vuoksi, jonka oireita ovat kipeät tai kutisevat silmät, kaksoisnäkö, päänsärky ja kipeä niska. Jotkut ihmiset voivat tuntea yhden tai useamman tällaisista oireista useita tunteja kuulokkeen ottamisen jälkeen.

Nyrkkisääntönä on, että VR-laitteen näyttö tulisi päivittää vähintään 90 kertaa sekunnissa (FPS) ja näytön viiveen tulee olla alle 20 millisekuntia, jotta ihmiset eivät aiheuta matkapahoinvointia.

Ilmoitetulla vain 12 millisekunnin viiveellä R1 lyhentää viiveen huomaamattomalle tasolle. Vaikka R1 auttaa minimoimaan matkapahoinvoinnin vaikutukset, jotkin Vision Pro -testaajat ilmoittivat matkapahoinvoinnin oireista, kun kuulokkeita oli käytetty yli 30 minuuttia.

Erikoistuneet Apple Silicon -apuprosessorit tuovat merkittäviä etuja

Applelle eivät ole vieraita erikoistuneet prosessorit. Vuosien varrella sen piitiimi on tuottanut mobiili- ja työpöytäsiruja, jotka ovat alan kadehtimia.

Applen piisirut luottavat vahvasti erikoistuneisiin apuprosessoreihin käsitelläkseen tiettyjä ominaisuuksia. Secure Enclave hallitsee esimerkiksi biometrisiä ja maksutietoja turvallisesti, kun taas Neural Engine nopeuttaa tekoälyn toimintoja tuhoamatta akkua.

Ne ovat täydellisiä esimerkkejä siitä, mitä voidaan saavuttaa erittäin keskittyneellä apuprosessorilla oikeisiin tehtäviin verrattuna. käyttää pääprosessoria kaikkeen.