Какво представлява чипът R1 на Apple и как се сравнява с M1 и M2?

Vision Pro носи нов силикон на Apple, чипът R1, предназначен за обработка на данни в реално време от всички вградени сензори. Той отговаря за проследяването на очите, ръцете и главата, изобразяването без забавяне на потребителската среда в режим на преминаване на видео и други функции на visionOS.

Чрез разтоварване на обработката от основния процесор и оптимизиране на производителността, R1 намалява болест на движението до незабележими нива, независимо дали използвате слушалките в разширена или виртуална реалност режим. Нека проучим как работи чипът Apple R1 и го сравняваме с основния чип M2, функциите Vision Pro, които активира, и още.

Какво представлява чипът R1 на Apple? Как работи?

Apple R1, а не основният чип M2, обработва непрекъснат поток от данни в реално време към Vision Pro от своите дванадесет камери, пет сензора и шест микрофона.

Две основни външни камери записват вашия свят, изпращайки над един милиард пиксела към 4K екраните на слушалките всяка секунда. Освен това чифт странични камери, заедно с две монтирани отдолу камери и два инфрачервени осветителя, проследяват движението на ръката от широк диапазон от позиции – дори при условия на слаба светлина.

Насочените навън сензори също включват LiDAR скенер и камерата TrueDepth на Apple, която улавя карта на дълбочината на заобикалящата ви среда, което позволява на Vision Pro да позиционира цифровите обекти точно във вашия пространство. От вътрешната страна пръстен от светодиоди около всеки екран и две инфрачервени камери проследяват движението на очите ви, което формира основата на навигацията на visionOS.

R1 има за задача да обработва данни от всички тези сензори, включително инерционните измервателни единици, с незабележимо забавяне. Това е от изключителна важност по отношение на превръщането на пространственото изживяване в гладко и правдоподобно.

Как се сравнява Apple R1 с M1 и M2?

M1 и M2 са процесори с общо предназначение, оптимизирани за Mac компютри. R1 е теснофокусен копроцесор, проектиран да поддържа плавни AR изживявания. Той върши работата си по-бързо, отколкото биха могли M1 или M2, позволявайки предимства като изживяване без забавяне.

Apple не уточнява колко CPU и GPU ядра има R1, нито детайлизира честотата на процесора и RAM, което прави директното сравнение между R1, M1 и M2 трудно.

Основните домейни на R1 са проследяване на очите и главата, жестове с ръце и 3D картографиране в реално време чрез сензора LiDAR. Разтоварването на тези изчислително интензивни операции позволява на M2 да изпълнява ефективно различните подсистеми, алгоритми и приложения на visionOS.

Основните характеристики на чипа R1 на Vision Pro

R1 има следните ключови възможности:

• Бърза обработка: Специализираните алгоритми и обработката на сигнала на изображението в R1 са оптимизирани за разбиране на входовете на сензора, камерата и микрофона.
• Ниска латентност: Оптимизираната хардуерна архитектура води до много ниска латентност.
• Енергийна ефективност: R1 се справя с определен набор от задачи, като използва минимална енергия, благодарение на своята ефективна архитектура на паметта и 5nm производствения процес на TSMC.

От друга страна, дизайнът с два чипа на Vision Pro и изтънчеността на R1 допринасят за високата цена на слушалките и два часа живот на батерията.

Какви предимства носи R1 на Vision Pro?

R1 позволява прецизно проследяване на очите и ръцете, което „просто работи“. За да навигирате във visionOS, например, насочвате погледа си към бутони и други елементи.

Vision Pro използва жестове с ръце за избор на елементи, превъртане и др. Сложността и прецизността на проследяването на очите и ръцете позволиха на инженерите на Apple да създадат слушалки със смесена реалност, които не изискват физически контролери.

Прецизността на проследяване на R1 и минималното забавяне позволяват допълнителни функции, като въздушно писане на виртуалната клавиатура. R1 също осигурява надеждно проследяване на главата - критично за създаване на пространствено изчислително платно около потребителя. Отново, прецизността е ключова тук – искате всички AR обекти да запазят позицията си, без значение как накланяте и въртите главата си.

Пространственото осъзнаване е друг фактор, който допринася за преживяването. R1 взема данни за дълбочината от сензора LiDAR и камерата TrueDepth, като извършва 3D картографиране в реално време. Информацията за дълбочината позволява на слушалките да разберат околната среда, като стени и мебели.

Това от своя страна е важно за устойчивостта на AR, което се отнася до фиксираното разположение на виртуални обекти. Освен това помага на Vision Pro да уведоми потребителя, преди да се сблъска с физически обекти, като помага за намаляване на риска от инциденти в AR приложения.

Как R1 Sensor Fusion смекчава AR прилошаването при пътуване?

Двучиповият дизайн на Vision Pro разтоварва обработката на сензора от основния M2 чип, който управлява операционната система и приложенията visionOS. Според Съобщение за пресата на Vision Pro, R1 предава поточно изображения от външните камери към вътрешните дисплеи в рамките на 12 милисекунди, или осем пъти по-бързо от мигването на окото, минимизирайки забавянето.

Закъснението се отнася до закъснението между това, което виждат камерите, и изображенията, показани на 4K екраните на слушалките. Колкото по-кратък е лагът, толкова по-добре.

Болестта при движение се случва, когато има осезаемо забавяне между информацията, която мозъкът ви получава от очите ви, и това, което усеща вътрешното ви ухо. Може да се случи в много ситуации, включително в увеселителен парк, на a разходка с лодка или круиз, докато използвате VR устройство и др.

VR може да разболее хората поради сензорен конфликт, водещ до симптоми на болест на движението като дезориентация, гадене, замаяност, главоболие, напрежение в очите, седене, повръщане и други.

VR също може да бъде лошо за очите ви поради напрежение на очите, чиито симптоми включват възпалени или сърбящи очи, двойно виждане, главоболие и болки във врата. Някои хора могат да почувстват един или повече от тези симптоми в продължение на няколко часа, след като свалят слушалките.

Като основно правило VR устройство трябва да опреснява дисплея поне 90 пъти в секунда (FPS), а забавянето на екрана трябва да е под 20 милисекунди, за да се избегне прилошаване на хората.

С посоченото забавяне от само 12 милисекунди, R1 намалява забавянето до незабележимо ниво. Докато R1 помага за минимизиране на ефектите от прилошаване при пътуване, някои тестери на Vision Pro съобщават за симптоми при прилошаване след носене на слушалките повече от 30 минути.

Специализираните силиконови копроцесори на Apple носят големи предимства

Apple не са непознати за специализираните процесори. През годините неговият силициев екип е произвел мобилни и настолни чипове, които предизвикват завист в индустрията.

Силициевите чипове на Apple разчитат до голяма степен на специализирани копроцесори, за да се справят със специфични функции. Secure Enclave управлява сигурно биометрични данни и данни за плащане, например, докато Neural Engine ускорява функциите на AI, без да разрушава батерията.

Те са идеални примери за това какво може да се постигне чрез наличието на силно фокусиран копроцесор за правилния набор от задачи срещу. използване на основния процесор за всичко.