Пълната сага за проблемните слушалки със смесена реалност на Apple е разкрита


Мъж с тениска седи на сцената.
Увеличете / Джони Айв говори на сцената по време на New Yorker TechFest 2017 в Ню Йорк.

Поредица от доклади в Информацията нарисувайте подробна картина на прогреса, политиката и проблемите, пред които е изправен планът на Apple да разработи слушалки за виртуална, разширена или смесена реалност, след като инициативата се засили през 2015 г.

Позовавайки се на няколко души, запознати с продукта, включително някои, които са работили директно върху него, докладите описват състезание на волята за посоката на устройството. Противостоянието беше между продуктовия екип за смесена реалност на Apple (наречен „Група за развитие на технологиите“) и известния дизайнер на Apple Джони Айв и неговия екип за индустриален дизайн. Докладът хвърля светлина върху посоката на Apple за устройството, което Bloomberg наскоро докладвано е близо до старта.

Те също така твърдят, че главният изпълнителен директор на Apple Тим Кук е бил относително далеч от продукта в сравнение с други като iPhone и че местоположението на групата за развитие на технологиите в отделен офис от главния щаб на Apple е източник на проблеми и разочарование.

Източниците на The Information казват, че усилията на Apple за смесена реалност започнаха почти случайно, когато компанията закупи немски AR стартъп, наречен Metaio, за да използва част от технологиите си в Project Titan, своя проект за самоуправляваща се кола. Друг ключов момент беше, когато Apple нае ръководителя на екипа на AR/VR проекта, Майк Рокуел, далеч от Dolby Laboratories. Започвайки през 2015 г., Рокуел изгради екип, който включваше съоснователя на Metaio Питър Майер и мениджъра на Apple Watch, Флетчър Роткопф.

През 2016 г. няколко демонстрации на AR бяха показани на членовете на борда на Apple. В единия малък трицератопс нарасна до реален размер пред очите на членовете на борда. В друга стая беше превърната в потапяща, озеленена среда. Но бордът не беше Rockwell и най-значимата бариера за компанията. Според The ​​Information, Айв беше този, който ръководеше екипите за индустриален дизайн и човешки интерфейс в Apple.

Айв и неговият екип оспориха VR слушалки, защото вярват, че VR разделя потребителите от хората и света около тях и че VR слушалките изглеждат немодерни. Но групата за развитие на технологиите спечели подкрепата на екипа за индустриален дизайн, като представи концепция: обърнат навън екран в предната част на слушалките, който показваше изображения на изражението на лицето и очите на потребителя на хората около него. Носещият може да види хората около себе си чрез външна камера.

Рокуел и неговите колеги разработиха и пуснаха ARKit през 2017 г., пакет за разработка на приложения, който позволи на разработчиците да създават AR приложения за iPhone и iPad, използвайки технологии и техники, които могат да бъдат адаптирани към слушалки по-късно.

Първоначално Рокуел и останалата част от екипа за смесена реалност искаха слушалките да бъдат свързани към базова станция, за да осигурят максимално впечатляваща графика и производителност, а някои от екипа я представиха като основно инструмент за професионалисти и творци, които да използват на своите бюра . Но аз не харесвах нито една от тези идеи и исках това да бъде продукт за масовия пазар, който потребителите могат да приемат в движение. Най-висшето ръководство на Apple подкрепи плана на Айв и Айв все още има активна роля в развитието на слушалките, въпреки че сега работи с Apple като консултант.

Съобщава се, че решението слушалките да се превърнат в самостоятелно устройство е причинило значителни главоболия. Например, някои смятат, че най-оптималният начин да го накарате да работи добре би бил да поставите повече функции на един чип. Но тъй като работата със силиция вече беше свършена, те трябваше да намерят начини да се борят с латентността, присъща на това, че множеството чипове в устройството комуникират един с друг. Те също така правеха софтуер, предполагайки, че планът на базовата станция ще продължи.

Независимо от това, устройството преминава към последните фази на разработка. Bloomberg заяви миналата седмица, че наскоро беше показана усъвършенствана версия на продукта до борда на Appleи че Apple е „ускорила“ разработването на софтуера на слушалките, който е разклонение на iOS, наречено rOS. (R означава “реалност.”)

Докладът на The Information разкрива много подробности за предстоящите слушалки. Той ще включва разделителна способност от най-малко 4K за всяко око, което според екипа е минималният минимум за потребителите да не възприемат изображението като пикселирано, за разлика от повечето актуални потребителски VR слушалки. Неговият вграден процесор ще бъде тясно свързан с процесора M2, който се очаква да достигне до Mac и iPad през следващите месеци.

Слушалките също ще имат 14 камери, някои обърнати навън и други навътре. Това ще позволи на потребителите да виждат външния свят и ще позволи на хората наблизо да видят видео представяне на очите на потребителя. Той ще проследява на живо движенията на лицето и тялото на потребителя, за да се съпостави с 3D аватар (вероятно подобен на Memoji на iPhone), който може да се използва за провеждане на отдалечени срещи и социални събирания с други хора, които носят слушалки, които са далеч.

Поради ограничените възможности за обработка на чипа M2 в слушалки без свързана базова станция (за отменената базова станция се казва, че има свръхвисокопроизводителен M1 Ultra), аватарите ще бъдат анимационни. Източниците на Информацията също така казват, че са били опитвани по-реалистични аватари, когато базовата станция е била част от плана, но невероятната долина е била проблем.

Първоначално Apple планираше да пусне слушалките през 2019 г., но сега изглежда, че вместо това може да бъде обявено по-късно тази година или през 2023 г. Освен това Apple планира да представи по-естествено изглеждащи AR очила като последващ продукт, но това устройство може да са още години от доставката.