Apple brýle

Říká se, že Apple má tajný tým stovek zaměstnanců pracujících na projektech virtuální a rozšířené reality.

• Ano
• Ne

Tajný projekt společnosti Apple pro rozšířenou a virtuální realitu

Obsah

1. Tajný projekt společnosti Apple pro rozšířenou a virtuální realitu
• Headset se smíšenou realitou
• AR chytré brýle
• Úniky AR iOS 14
• AR v Xcode
• Partnerství ventilů?
• Jiné pověsti
2. Rozšířená realita vs. virtuální realita
3. tým společnosti Apple pro VR/AR
• Najímá
• Akvizice
4. Patenty AR / VR
5. Datum spuštění
6. Budoucí plány AR/VR
7. Časová osa brýlí Apple

Apple zkoumá technologie virtuální reality a rozšířené reality již více než 10 let na základě patentových přihlášek, ale s tím, jak virtuální a rozšířená realita explodovala v souvislosti se spuštěním ARKitu, je fušování Applu stále vážnější a očekává se, že povede k AR/ Produkt VR v roce 2022.

Říká se, že Apple má tajnou výzkumnou jednotku se stovkami zaměstnanců pracujících na AR a VR a zkoumajících způsoby, jak by mohly být nově vznikající technologie použity v budoucích produktech Apple. Najímání VR/AR se za posledních několik let zvýšilo a Apple získal několik společností AR/VR, protože podporuje svou práci v prostoru AR/VR.

O Applu se říká, že na něm minimálně pracuje dva Projekty AR, které zahrnují náhlavní soupravu pro rozšířenou realitu, která má být uvedena na trh kolem roku 2022, po níž později přijdou elegantnější brýle pro rozšířenou realitu. Mnoho zvěstí se soustředilo pouze na brýle, což vedlo k určitému zmatku ohledně plánů společnosti Apple, ale zdá se, že AR/VR headset bude prvním produktem na trh.

Apple analytik Ming-Chi Kuo věří, že náhlavní souprava Applu se smíšenou realitou vyjde koncem roku 2022 nebo začátkem roku 2023, přičemž Apple Glasses budou následovat v roce 2025, ačkoli jiné zdroje uvedly, že brýle přijdou v roce 2023. Headset je AR/VR, neboli smíšená realita, zatímco brýle Apple jsou rozšířenou realitou.

Headset se smíšenou realitou

Informace a Bloomberg oba uvedli, že Apple pracuje na chytrých brýlích A náhlavní soupravě AR/VR (aka smíšená realita), přičemž náhlavní souprava vyjde jako první a poté brýle. Říká se, že headset je podobný headsetu pro virtuální realitu Oculus Quest od Facebooku, ale s uhlazenějším designem, který využívá tkaniny a lehké materiály, aby byl headset pohodlný.

Říká se, že funkce dva displeje s vysokým rozlišením 8K a kamery detekující oči, které uživatelům umožní „číst malým písmem“ a „vidět ostatní lidi stojící před a za virtuálními objekty“. Náhlavní souprava bude schopna mapovat povrchy, hrany a rozměry místností s „větší přesností než stávající zařízení na trhu“. Bude mít pokročilejší displej a čip, který je ještě rychlejší než procesor M1 v počítačích Mac 2020.

Informace v únoru řekl, že bude vybaven více než tuctem kamer pro sledování pohybů rukou kromě kamer pro vidění vnějšího světa a design blokuje periferní vidění, aby se zabránilo pronikání světla do zorného pole nositele. Do displeje by také mohl být zabudován zorník směřující ven, který uživateli umožní ukázat grafiku ostatním.

The Elec tvrdí, že VR headset bude obsahovat micro OLED displej s vysokým rozlišením až 3000 pixelů na palec. Dříve se hovořilo o micro OLED displeji pro chytré brýle, ale ne o VR headsetu.

Apple analytik Ming-Chi Kuo uvedl, že nadcházející náhlavní souprava Apple pro smíšenou realitu bude obsahovat 15 modulů optických kamer celkem. Osm z 15 kamerových modulů bude použito pro průhledné zážitky s rozšířenou realitou, šest modulů bude použito pro „inovativní biometrii“ a jeden kamerový modul bude použit pro detekci prostředí.

Kuo také věří že náhlavní souprava Apple bude vybavena pokročilým systémem sledování očí, který se používá k poskytování intuitivního vizuálního zážitku, který hladce spolupracuje s vnějším prostředím, spolu s intuitivnějším ovládáním, které lze ovládat pohyby očí, a sníženou výpočetní zátěží v podobě snížené rozlišení, kam se uživatel nedívá.

Designově byla náhlavní souprava popsána jako „úhledný, zakřivený kšilt připevněný k obličeji pomocí síťovaného materiálu a vyměnitelné čelenky“. Jedna čelenka údajně obsahuje technologii prostorového zvuku, jako je AirPods Pro, pro zážitek s prostorovým zvukem, zatímco druhá poskytuje další výdrž baterie na cestách. Apple pracuje na několika metodách ovládání, včetně „náprstku podobného zařízení, které se nosí na prstu člověka“. Náhlavní souprava by také byla schopna reagovat na pohyby očí a gesta rukou nositele, zatímco jeden prototyp náhlavní soupravy měl také fyzický číselník na straně hledí. Apple také testuje vstup Siri.

Apple chce vytvořit App Store pro náhlavní soupravu se zaměřením na hraní her, streamování video obsahu a videokonference. To bylo popsáno uživatelem Bloomberg jako „všezahrnující 3-D digitální prostředí“ navržené pro hraní her, sledování videa a komunikaci.

Aktuální prototypy headsetu říkají vážit kolem 200 až 300 gramů, ale Apple má za cíl snížit konečnou hmotnost na 100 až 200 gramů, pokud se podaří vyřešit technické problémy, díky čemuž by byla náhlavní souprava lehčí než stávající zařízení VR. Headset bude přenosný s nezávislým napájením a úložištěm, ale nebude ‚mobilní‘ jako iPhone. Poskytne „pohlcující zážitek“, který předčí aktuálně dostupné produkty VR, a mohl by být integrován s Apple TV+ a Apple Arcade.

Funkce rozšířené reality pro náhlavní soupravu je „omezenější“ a ačkoli je vydání plánováno na rok 2022, Apple údajně narazil na několik vývojových překážek a má „konzervativní“ odhady prodeje zařízení. Apple očekává, že prodá přibližně 180 000 kusů, což je srovnatelné s dražšími zařízeními, jako je Mac Pro. Očekává se, že náhlavní souprava bude mnohem dražší než náhlavní soupravy jiných společností a Informace říká, že Apple diskutoval o ceně headsetu na přibližně 3 000 $.

Původní návrh zahrnoval ventilátor a výkonné procesory, což vedlo k příliš těžkému zařízení. Apple se údajně rozhodl headset přiblížit k obličeji, aby ubral na velikosti. Uživatelé nebudou moci při používání náhlavní soupravy nosit brýle, takže Apple vytvořil systém, kde lze přes obrazovky VR vkládat vlastní čočky na předpis.

Kuo věří, že sluchátka bude používat hybridní design Fresnelovy čočky , zahrnující tři naskládané čočky na oko vyrobené z lehkého plastu. Účelem návrhu je umožnit ultrakrátké ohniskové vzdálenosti a vylepšený optický výkon, stejně jako široké zorné pole a udržet váhu headsetu pod 150 gramů.

Pokud jde o výkon, nadcházející AR/VR headset bude obsahovat a špičkový hlavní procesor to je podobné čipu M1, který Apple loni debutoval pro své křemíkové Macy Apple, spolu s procesorem nižší třídy pro správu aspektů zařízení souvisejících se senzory.

Apple analytik Ming-Chi Kuo tvrdí, že bude schopen fungovat nezávisle, aniž by se spoléhal na Mac nebo iPhone, což je odchylka od dřívějších fám, které říkaly, že vyžadovat lanko na iPhone. Vysoce výkonný čip v náhlavní soupravě bude pohánět dvojici 4K Micro OLED displejů od Sony a šest až osm optických modulů pro poskytování funkcí na bázi AR. Apple má dokončené dílo na SoC pro náhlavní soupravu AR/VR a bude optimalizovat pro bezdrátový přenos dat, kompresi a dekompresi videa a energetickou účinnost pro maximální výdrž baterie a nemá neurální engine jako některé jiné čipy Apple.

Nadcházející náhlavní souprava pro smíšenou realitu od Applu ano nabízí WiFi 6E podpora, což je nejnovější specifikace WiFi. Apple údajně plánuje implementovat WiFi 6E, aby poskytl špičkový, pohlcující zážitek se solidní bezdrátovou konektivitou. WiFi 6E má všechny výhody WiFi 6, ale kromě pásem 2,4 GHz a 5 GHz přidává spektrum 6 GHz pro větší šířku pásma a menší rušení mezi zařízeními.

Vykreslování náhlavní soupravy se smíšenou realitou

Návrhář Antonio De Rosa má vyvinuté 3D rendery na základě podrobností sdílených uživatelem Informace , což nám dává pohled na to, jak by mohla vypadat náhlavní souprava Apple pro smíšenou realitu na základě současných pověstí.

Informace popsal náhlavní soupravu jako „úhledný, zakřivený kšilt připevněný k obličeji síťovým materiálem a vyměnitelnými čelenkami“ nabízený v několika barvách.

První prototypy sluchátek

Předchozí zvěsti od CNET v roce 2018 naznačil, že Apple pracuje na výkonné AR/VR náhlavní soupravě s 8K displejem pro každé oko, která by byla odpojena od počítače i smartphonu a fungovala by s aplikacemi pro virtuální i rozšířenou realitu.

Spíše než se spoléhat na připojení k chytrému telefonu nebo počítači, sluchátka CNET popsaný by se připojoval k „vyhrazenému boxu“ pomocí vysokorychlostní bezdrátové technologie krátkého dosahu nazývané 60GHz WiGig. Krabice by byla poháněna vlastním 5nanometrovým procesorem Apple, který je „výkonnější než cokoliv, co je v současnosti dostupné“. Krabice zdánlivě připomíná PC tower, ale „nebude to skutečný počítač Mac“. Tento krabicový design byl předmětem raných pověstí a může být prototypem, který byl od té doby opuštěn pro uhlazenější verzi, kterou nyní pověsti popisují.

Vnitřní neshody prý v průběhu času formovaly a měnily cíle Applu pro jeho AR headset. Apple byl zpočátku míření pro ultravýkonný systém, který byl dodán s rozbočovačem pro umístění procesoru, jak je popsáno výše, ale Jony Ive, který mezitím ze společnosti odešel, nechtěl prodávat zařízení, které by pro plnou funkčnost vyžadovalo samostatné stacionární zařízení.

Ive místo toho chtěl náhlavní soupravu s méně výkonnou technologií, kterou by bylo možné zabudovat přímo do zařízení, ale vedoucí týmu AR/VR Mike Rockwell chtěl výkonnější zařízení. Byla to patová situace, která trvala měsíce a Tim Cook se nakonec postavil na stranu Ivea. Ive prý preferuje chytré brýle pro AR, na kterých se také pracuje.

AR chytré brýle

Apple pracuje na sadě brýlí pro rozšířenou realitu, kterou Leaker Jon Prosser navrhl Apple bude nazývat „Apple Glass“. Toto jméno by bylo neobvyklou volbou vzhledem k podobnosti s názvem Google Glass, produktu, který existoval dlouho předtím, než se objevila práce společnosti Apple na brýlích pro AR, takže nemusí být přesné.

Brýle prý vypadají podobně jako běžné brýle, přičemž obě čočky obsahují displeje, se kterými lze interagovat pomocí gest. Brýle bude možné získat bez dioptrických čoček za možnou počáteční cenu 499 USD, přičemž dioptrické čočky budou k dispozici za příplatek.

Podle Bloomberg , brýle jsou v raná fáze vývoje , ještě dříve než AR/VR headset, na kterém Apple pracuje. Brýle byly popsány jako „několik let vzdálené“, ačkoli Apple původně plánoval jejich uvedení na trh již v roce 2023. Současný prototyp se podobá špičkovým slunečním brýlím s tlustými obroučkami, ve kterých je umístěna baterie a čipy.

Apple údajně je plánuje použití „špičkové“ mikrodispleje OLED dodávané společností Sony pro její pověstné brýle pro rozšířenou realitu. Mikrodispleje Sony OLED se vyznačují ultra rychlou odezvou, ultra vysokým kontrastem, širokým barevným gamutem, vysokou svítivostí, nízkou odrazivostí a integrovanými ovladači pro tenký a lehký design. Brýle mají údajně disponovat 0,5palcovým displejem s rozlišením 1280 x 960.

Kuo očekává, že brýle pro AR budou uváděny na trh jako příslušenství pro iPhone a že s brýlemi převezmou především roli displeje a přenesou výpočetní techniku, sítě a určování polohy na iPhone. poskytování „Optický průhledný AR zážitek“ jako první pro mobily. Nabízení AR brýlí jako příslušenství pro iPhone umožní společnosti Apple udržet je tenké a lehké. Prosser říká, že brýle budou vypadat podobně jako Ray-Ban Wayfarers nebo brýle, které nosí Tim Cook.

Bloomberg řekl, že brýle Apple poběží operačním systémem 'rOS' nebo reality. rOS je údajně založen na iOS, operačním systému, který běží na iPhone. Pro AR headset Apple vyvíjí čip „system-on-a-package“ podobný tomu, co je v Apple Watch, i když se bude spoléhat na iPhone, jak je uvedeno výše.

V průběhu vývoje AR headsetu Apple zvažoval dotykové panely, hlasovou aktivaci a gesta hlavy jako vstupní metody a prototypuje se řada aplikací od mapování po textové zprávy. Virtuální zasedací místnosti a 360stupňové přehrávání videa jsou také koncepty, které se zkoumají.

Myslel jsem, že se objevily počáteční fámy spuštění v roce 2020 , Bloomberg věří AR brýle mohl přijít do vydání zbývají roky a VR headset má vyjít v roce 2022. Zpráva z DigiTimes navrhl, že AR brýle společnosti Apple budou uvedeny na trh v roce 2021 a analytik společnosti Apple Ming-Chi Kuo očekává uvedení na trh v roce 2022 nejdříve .

Leaker Jon Prosser věří, že Apple odhalí své AR brýle v březnu nebo červnu 2021, ale to se zdá být nepřesné vzhledem k odhadům z Bloomberg a Kuo.

Prosser také říká, že Apple pracuje na limitované edici 'Steve Jobs Heritage' verze chytrých brýlí, které jsou navrženy tak, aby vypadaly jako kulaté, bezrámové brýle, které nosil Steve Jobs, ale Bloomberg Mark Gurman nazval tuto fámu „úplnou fikcí“.

Apple je spolupráce s TSMC vyvinout „ultra-pokročilé“ micro OLED displeje, které budou použity v nadcházejících zařízeních Apple pro rozšířenou realitu, jako jsou chytré brýle. Displeje jsou prý menší než jeden palec.

Micro OLED displeje jsou postaveny přímo na čipových waferech spíše než na skleněném substrátu, což vede k displejům, které jsou tenčí, menší a energeticky účinnější. Vývoj na micro OLED displejích je údajně ve fázi zkušební výroby a bude trvat několik let, než budou Apple a TSMC připraveny na sériovou výrobu, díky čemuž by tyto displeje byly vhodné pro Apple Glasses, o kterých se říká, že budou spuštěny někdy kolem roku 2023.

Počátkem roku 2021 Apple se říká, že je vstupuje do „druhé fáze vývoje“ prototypu brýlí pro rozšířenou realitu. Brýle mají projít třetí fází vývoje během několika měsíců a poté, co bude dokončen návrh prototypu, projde nositelné zařízení šesti až devítiměsíčním obdobím technického ověření.

Úniky AR iOS 14

Kód a obrázky nalezený v iOS 14 Potvrdit práci Applu na náhlavní soupravě AR nebo VR objevenou fotografií, která znázorňuje obecně vypadající ovladač pro náhlavní soupravu, která je svým designem podobná náhlavní soupravě HTC Vive Focus. Apple používá hardware HTC Vive pro účely interního testování.

Apple testuje své AR zařízení s aplikací pro iOS 14 s názvem Gobi spolu s QR kódy, aby otestoval zážitky z rozšířené reality. Jedním z těchto zážitků s rozšířenou realitou je bowlingová hra na přechodu pro chodce spuštěná na konkrétním přechodu pro chodce v Sunnyvale v Kalifornii.

AR v Xcode

Kód v Xcode 11 potvrzuje Práce Applu na nějakém typu AR headsetu. Existují odkazy na testovací zařízení s kódovým označením plus rámce a systémové prostředí související s těmito zařízeními. Reference naznačují, že Apple vyvíjí podporu pro AR na obličeji, která je podobná Daydream od Google.

Partnerství ventilů?

Podle tchajwanských stránek DigiTimes , se kterým Apple spolupracuje herní vývojář Valve pro jeho pověstnou AR náhlavní soupravu. Společnost Valve vydala svůj první headset pro VR, Valve Index, v dubnu 2019.

Společnost Valve již dříve spolupracovala s Apple, aby přinesla nativní podporu VR headsetu do macOS High Sierra, přičemž využila podporu eGPU s verzí softwaru SteamVR pro Mac.

Jiné pověsti

V listopadu 2017 Apple koupil Vrvana, společnost, která vyvinula náhlavní soupravu pro smíšenou realitu s názvem Totem. Technologie Vrvany by mohla být potenciálně použita v budoucích náhlavních soupravách Apple. Apple navázal na koupi Vrvany akvizicí Akonia Holographics, společnosti, která vyrábí čočky pro chytré brýle pro AR.

Pověsti také naznačovaly, že by Apple mohl začlenit svůj výzkum rozšířené reality do svého probíhajícího automobilového projektu jako součást softwarového systému v autě, který by mohl obsahovat head-up displej nebo jiné funkce.

Poznámka: Vidíte v tomto shrnutí chybu nebo chcete nabídnout zpětnou vazbu? .

Rozšířená realita vs. virtuální realita

Rozšířená realita (AR) a virtuální realita (VR) jsou podobné technologie, ale je mezi nimi velký rozdíl a jejich potenciální aplikace se značně liší. Virtuální realita odkazuje na plně pohlcující zážitek ve virtuálním světě, zatímco rozšířená realita odkazuje na upravený pohled na skutečný svět.

Rozdíl lze snad nejlépe shrnout srovnáním dvou produktů, jednoho AR a jednoho VR. Google Glass , dnes již neexistující sada chytrých brýlí od Googlu, je příkladem rozšířené reality. Okem nošené brýle Google Glass umožňovaly uživatelům vidět svět takový, jaký je, ale nabízely průhledový displej, který překrýval relevantní informace poskytnuté počítačem přes zobrazení skutečného světa, jako je místní počasí, mapy a upozornění.

Je to podobné tomu, na čem prý Apple pracuje se svými pověstnými „chytrými brýlemi“.

Ve srovnání s Facebookem Oculus Rift je náhlavní souprava pro virtuální realitu nabízející pohlcující vizuální zážitek, který nerozšiřuje skutečný svět o další smyslové informace – plně nahrazuje skutečný svět světem simulovaným.

Rozšířená realita poskytuje počítačově generovaný kontext a informace o světě kolem nás a zároveň nám umožňuje interakci s okolím, zatímco virtuální realita je navržena tak, aby nás izolovala od našeho okolí, abychom mohli interagovat s fiktivními světy.

jak zabít aplikaci na iphone

Potenciální aplikace pro tyto dva jsou značně odlišné. Virtuální realita je jedinečně zaměřena na pohlcující konzumaci obsahu, protože díky ní má uživatel pocit, jako by skutečně prožíval to, co se děje v simulovaném světě, prostřednictvím vizuální, hmatové a zvukové zpětné vazby. Virtuální realita je právě teď do značné míry spojena s hraním, ale má také potenciál znovu vytvořit zážitky ze skutečného světa pro vzdělávací nebo školicí účely.

Rozšířená realita nezávisí na pohlcujícím obsahu, a přestože je méně vzrušující, protože realitu rozšiřuje, místo aby ji nahradila, má širší škálu potenciálních aplikací. Ve skutečnosti jsou aplikace a hry pro rozšířenou realitu snadno dostupné v iOS 11 díky ARKitu.

S ARKit je zařízení iOS schopno identifikovat povrch, jako je stůl, a poté na něj lze přidat virtuální objekty. Díky výpočetnímu výkonu iPhonu a iPadu jsou možnosti rozšířené reality ARKitu působivé. ARKit se již používá k vytváření široké škály aplikací a her, které mísí digitální objekty se skutečným světem.

hrát si

Apple může usilovat o produkt, který funguje jak s rozšířenou, tak s virtuální realitou, jak naznačují nedávné zvěsti naznačující práci na náhlavní soupravě AR/VR. Takový produkt by mohl být použit pro seriózní aplikace virtuální reality i zážitky s rozšířenou realitou a byl by podobný Microsoft HoloLens.

tým společnosti Apple pro VR/AR

Práce společnosti Apple na virtuální a rozšířené realitě se datují již několik let, ale zvěsti se začaly šířit od března 2015, kdy se objevila zpráva, že Apple má malý tým lidí pracujících na rozšířené realitě. V roce 2015 a na začátku roku 2016 se tým Applu rozrostl, protože společnost najala zaměstnance se zkušenostmi v technologii AR/VR a provedla několik souvisejících akvizic.

Tým Apple pro AR/VR zahrnuje několik stovek inženýrů z celého Apple, z nichž všichni mají zkušenosti s virtuální a rozšířenou realitou. Tým pracuje napříč kancelářskými parky v Cupertinu i Sunnyvale a Apple zkoumá několik hardwarových a softwarových projektů pod kódovým označením „T288“.

Tým společnosti Apple pro rozšířenou realitu kombinuje „silné stránky svých hardwarových a softwarových veteránů“ a vede jej Mike Rockwell, který přišel ze společnosti Dolby. Bývalí zaměstnanci společností jako Oculus, HoloLens, Amazon (z týmu VR), 3D animační společnost Weta Digital a Lucasfilm pracují na AR v Apple.

Bývalý šéf hardwarového inženýrství společnosti Apple Dan Riccio v lednu 2021 přešel do nové role kde je dohlíží na práci Applu na náhlavní soupravě AR/VR. Projekt čelil vývojovým výzvám a vedoucí společnosti Apple věří, že Ricciovo zaměření může pomoci.

Najímá

Jedním z nejvýznamnějších zaměstnanců společnosti Apple pro AR/VR byl profesor počítačových věd Doug Bowman, který dříve vedl centrum pro interakci člověka s počítačem ve Virginia Tech. Specializuje se na návrh trojrozměrného uživatelského rozhraní a napsal knihu na toto téma, která se zabývá 3D rozhraními a výhodami pohlcujících virtuálních prostředí. Má zkušenosti s virtuální i rozšířenou realitou.

Apple také najal zaměstnance, kteří pracovali na produktech pro virtuální nebo rozšířenou realitu ve společnostech Microsoft a Lytro. Někteří nedávní zaměstnanci jsou údajně z týmu HoloLens společnosti Microsoft, zatímco jiní pracovali ve společnosti Lytro, která pracuje na kameře, která je schopna propojit živou akci a počítačovou grafiku pro živou akční VR. Zaměstnanci z týmu HoloLens by měli zkušenosti s vytvářením pokročilé náhlavní soupravy pro rozšířenou realitu.

360stupňová kamera Lytro Immerge

Zeyu Li, který sloužil jako hlavní inženýr počítačového vidění ve společnosti Magic Leap (startup vyvíjející AR/VR displej namontovaný na hlavě), nyní pracuje ve společnosti Apple jako ‚Senior Computer Vision Algorithm Engineer‘.

Yury Petrov, bývalý vědecký pracovník společnosti Oculus vlastněné Facebookem, nyní slouží jako „výzkumný vědec“ ve společnosti Apple. Podle svého profilu na LinkedIn Petrov studoval zkušenosti s virtuální realitou, prototypoval optiku a vyvíjel počítačový simulační software.

Expert na rozšířenou realitu Jeff Norris nastoupil do Applu v dubnu 2017 jako senior manažer pracující ve firemním týmu pro rozšířenou realitu. Norris založil Mission Operations Innovation Office a JPL Ops Lab v NASA. Vedl několik projektů zaměřených na interakci člověka a systému s důrazem na virtuální a rozšířenou realitu.

Apple v květnu 2018 najal Sterlinga Crispina, který vyvinul aplikaci pro malování pro mobilní VR sluchátka. „Cyber ​​Paint“ umožňuje uživatelům VR headsetů vytvářet 2D 260stupňové obrázky na Oculus Go, Daydream, GearVR a Vive Focus. Crispinova stránka LinkedIn říká, že pracuje jako „výzkumník prototypů“, což naznačuje, že se připojil k týmu, o kterém se říká, že pracuje na technologii náhlavních souprav VR/AR.

Apple v prosinci 2018 najal bývalého seniorního designéra Tesly a Microsoft HoloLens Andrewa Kima a vzhledem k jeho historii by mohl pracovat na projektu AR brýlí společnosti Apple nebo na jejím nadcházejícím voze Apple, který je údajně ve vývoji.

Zakladatel Jaunt VR Arthur van Hoff nastoupil do Applu jako senior architekt v dubnu 2019. Před prací v Applu se jeho společnost vytvořený VR hardware , včetně 3D VR kamery v hodnotě 100 000 USD s názvem Jaunt One. Před tím, než van Hoff ze společnosti odešel, Jaunt selhal a přeorientoval se na zkušenosti s AR.

S týmem Applu, který zahrnuje stovky zaměstnanců, existuje mnoho dalších expertů na virtuální realitu, kteří se dostali pod radar. Na LinkedIn je několik softwarových inženýrů se zkušenostmi s virtuální realitou, které Apple zaměstnává, ale není jasné, zda pracují v tajném týmu AR/VR.

Apple v červenci 2019 přestěhoval Kim Vorrath, jednoho ze svých softwarových manažerů, do sluchátka s rozšířenou realitou divize, aby 'vnesl do týmu nějaký řád'. Vorrath již 15 let dohlíží na správu programů v týmu vývoje softwaru a byl popsán jako „mocná síla“, která zajišťuje, aby zaměstnanci dodržovali termíny a zároveň odhalovali chyby.

Akvizice

Mnoho členů týmu AR/VR společnosti Apple se mohlo připojit ke společnosti prostřednictvím akvizic. Od roku 2015 Apple koupil několik společností, které vytvářely produkty související s AR/VR, a některé jeho akvizice AR/VR se datují dokonce několik let zpět.

Apple v srpnu 2018 koupil Akonia Holographics, startup, který vyrábí čočky pro brýle s rozšířenou realitou. Akonia Holographics inzeruje „první komerčně dostupnou objemovou holografickou reflexní a vlnovodnou optiku na světě pro průhledné zobrazovací prvky v chytrých brýlích“.

Displeje, které vyrábí, údajně využívají technologii HoloMirror společnosti pro „ultračistý, plně barevný výkon“, který umožňuje „nejtenčí a nejlehčí displeje na světě, které se nosí na hlavě“.

V listopadu 2017 Apple koupil Vrvana, společnost, která vyvinula náhlavní soupravu pro smíšenou realitu s názvem Totem. Totem, který nebyl nikdy zveřejněn pro veřejnost, byl navržen tak, aby kombinoval technologie rozšířené i virtuální reality v jedné náhlavní soupravě a spojoval plné možnosti VR s průchozími kamerami, aby umožnil funkce rozšířené reality založené na obrazovce.

Totem v podstatě používal sadu kamer k promítání obrazů skutečného světa do svého vestavěného 1440p OLED displeje, což je poněkud jedinečný přístup, který jej odlišuje od konkurenčních produktů, jako je HoloLens společnosti Microsoft, který používá průhledný displej ke kombinaci virtuální a rozšířené reality. Apple by mohl plánovat použití některých technologií Totemu v budoucím produktu.

Apple v roce 2013 koupil izraelskou firmu PrimeSense pro 3D snímání těla, což vyvolalo spekulace, že funkce založené na pohybu budou implementovány do Apple TV. Technologie 3D hloubky PrimeSense a schopnosti snímání pohybu byly použity v počáteční platformě Kinect společnosti Microsoft.

PrimeSense použil blízko IR světlo k promítání neviditelného světla do místnosti nebo scény, které je následně přečteno obrazovým snímačem CMOS a vytvořit virtuální obraz předmětu nebo osoby. To umožňuje ovládání softwarových rozhraní založené na pohybu, ale je také schopno dělat věci, jako je měření virtuálních objektů a poskytování relativních vzdáleností nebo velikostí, což je užitečné pro aplikace rozšířené reality, jako je interaktivní hraní, vnitřní mapování a další. Technologie PrimeSense může také vytvářet vysoce přesné 360stupňové skenování lidí a objektů, které je potenciálně užitečné pro aplikace virtuální reality.

Apple koupil startup Metaio pro rozšířenou realitu v květnu 2015. Společnost Metaio vytvořila produkt nazvaný Metaio Creator, který lze použít k vytvoření scénářů rozšířené reality během několika minut. Než byl software Metaio zakoupen společností Apple, byl používán společnostmi jako Ferrari, které vytvořily showroom pro rozšířenou realitu.

Technologie Metaio byla také použita v Berlíně, aby umožnila lidem navštěvujícím místo Berlínské zdi pomocí chytrého telefonu nebo tabletu vidět, jak oblast vypadala, když Berlínská zeď ještě stála. Technologie Metaio je ta, která by mohla být potenciálně použita k implementaci funkcí rozšířené reality do aplikací Apple, jako jsou Mapy.

Apple získal Faceshift v srpnu 2015, což znamená jeho druhý nákup rozšířené reality v roce 2015. Před akvizicí společností Apple spolupracoval Faceshift s herními a animačními studii na technologii určené k rychlému a přesnému zachycení výrazů obličeje pomocí 3D senzorů a jejich přeměně na animované tváře v reálný čas. Faceshift také pracoval na spotřebitelsky orientovaném produktu, který by lidem umožnil přeměnit jejich tváře na kreslené nebo monstrózní tváře v reálném čase ve Skype.

Technologie Faceshift má širokou škálu možných případů použití a zdá se, že Apple tuto funkci používá k napájení Animoji v iPhone X.

Společnost Emotient, která vytvořila nástroje pro analýzu výrazu obličeje, byla koupena společností Apple v lednu 2016. Technologie společnosti Emotient využívá umělou inteligenci a strojové učení ke čtení lidských emocí, což jsou funkce, které v reálném světě používají inzerenti k určení emočních reakcí na reklamy.

Existují desítky věcí, které by Apple mohl udělat s Emotientem, od lepší detekce obličeje v aplikaci Fotky přes analýzu pocitů zákazníků v maloobchodních prodejnách Apple až po odemykání zařízení iOS, ale má také potenciální využití AR/VR. Stejně jako Faceshift lze technologii Emotient použít k analýze a transformaci výrazů obličeje pro vytvoření virtuálních avatarů, užitečných pro účely sociálních médií a hry. Technologie emocí byla pravděpodobně použita pro Animoji.

Flyby Media, zakoupená na začátku roku 2016, je další společností, která pracovala na rozšířené realitě. Letět s vytvořil aplikaci který spolupracoval s chytrým telefonem „Project Tango“ společnosti Google vybaveným 3D senzory, což umožňuje připojovat zprávy k objektům reálného světa a prohlížet si je ostatní na jednom ze zařízení Google.

Osoba by například mohla „naskenovat“ orientační bod, jako je sanfranciský Golden Gate Bridge, a napsat k němu připojenou zprávu. Osoba, která můstek navštíví později, by pak mohla oskenovat můstek pomocí aplikace Flyby a zobrazit zprávu. Aplikace Flyby pravděpodobně přitáhla pozornost Applu, protože dokázala rozpoznat a porozumět různým objektům, které byly naskenovány, což je technologie, kterou Apple mohl využít mnoha způsoby v aplikacích, jako jsou Fotky a Mapy.

V únoru 2017 Apple koupil RealFace, společnost zabývající se kybernetickou bezpečností a strojovým učením, která se specializuje na technologii rozpoznávání obličejů, kterou by bylo možné potenciálně využít pro budoucí funkce rozšířené reality.

RealFace vyvinul technologii rozpoznávání obličeje integrující umělou inteligenci pro rozpoznávání obličeje bez tření. Pravděpodobně byla použita technologie Realface v iPhone X , první smartphone společnosti Apple s funkcí rozpoznávání obličeje ve formě Face ID.

Apple v květnu 2020 získala NextVR , kalifornská společnost, která kombinovala virtuální realitu se sportem, hudbou a zábavou a nabídla VR zážitky pro sledování živých událostí na VR headsetech od PlayStation, HTC, Oculus, Google, Microsoft a dalších výrobců.

Apple v srpnu 2020 koupil VR startup Spaces , společnost, která navrhla zážitky ve virtuální realitě, které by lidé mohli zažít v obchodních centrech a na jiných místech, jako je 'Terminator Salvation: Fight for the Future'. Spaces také vytvořil virtuální realitu pro aplikace pro videokomunikaci, jako je Zoom, což je něco, co by Apple mohl potenciálně začlenit do budoucího produktu AR/VR.

Patenty AR / VR

Apple podal několik patentů, které se přímo týkají náhlavní soupravy pro virtuální realitu, všechny pocházejí několik let. I když technologie pravděpodobně poněkud pokročila, poskytují zajímavý pohled na nápady, které Apple v minulosti prozkoumal.

Patentová přihláška z roku 2008 se týkala poměrně základního „osobního zobrazovacího systému“ navrženého tak, aby napodoboval zážitek z pobytu v kině při sledování videa.

Druhý patent popisoval „head Mounted Display System“ s „laserovým motorem“, který promítal obrazy na čirý skleněný displej nasazený přes oči, podobný brýlím. V této konfiguraci je náhlavní souprava připojena k ručnímu video přehrávači, jako je iPod, aby poskytovala výpočetní výkon.

Třetí patent, který byl původně podán v roce 2008, měl podobný design a pokrýval brýlí podobnou videonáhlavní soupravu, která uživatelům umožňuje sledovat filmy a další obsah. Nastínil dva nastavitelné optické moduly zarovnané s okem uživatele, které by mohly zajistit korekci zraku a umožnit sledování 3D obsahu. Apple to popsal jako nabídku osobního zážitku ze sledování médií.

NA čtvrtý patent z roku 2008 zakrýval rámeček video náhlavní soupravy podobný Google Glass, který umožňoval uživateli zasunout svůj iPhone nebo iPod do náhlavní soupravy a poskytnout video. Náhlavní souprava byla popsána jako produkt rozšířené reality, který uživatelům umožňuje například sledovat video nebo kontrolovat e-maily a zároveň sledovat své okolí.

Kromě patentů souvisejících s náhlavními soupravami Apple také požádal o patenty popisující další způsoby, jak by mohly být funkce virtuální a rozšířené reality implementovány do jeho zařízení. Patentová přihláška z roku 2009 se například týkala 3D displejů vybavených fotoaparátem, které se perspektivně posouvaly na základě relativní polohy uživatele.

Takový displej by detekoval pohyb hlavy, což by uživateli umožnilo pohybovat hlavou a dívat se na 3D obraz z různých úhlů a zároveň by zahrnovalo prvky uživatelského prostředí.

Patenty z roku 2010 a 2012 popsaly použití pohybových senzorů k vytvoření 3D rozhraní pro iOS zařízení pomocí technik rozšířené reality. Apple popsal rozhraní jako „virtuální místnost“, kterou ovládáte manipulací s orientací zařízení pomocí vestavěných senzorů nebo pomocí gest.

V roce 2011 podal Apple patent na funkci rozšířené reality v aplikaci Mapy související s mapováním vzdálenosti k významným orientačním bodům. Pomocí kamery se uživatel mohl podívat na oblast kolem sebe a získat odhady vzdálenosti mezi dvěma body v reálném čase spolu s překryvnými relevantními informacemi.

Patent podaný v roce 2014 a udělený v roce 2017 se týká mobilního systému rozšířené reality, který je schopen detekovat objekty v prostředí a překrývat je virtuálními informacemi pomocí kamer, obrazovky a uživatelského rozhraní. Apple popisuje systém jako ideální pro náhlavní displej, ale ukazuje i jeho použití v chytrých telefonech.

Apple pracuje na technologii virtuální reality, která by mohla být používané v autonomních vozidlech . Několik patentů společnosti Apple popisuje systém, který zahrnuje systém virtuální reality v autě s náhlavní soupravou VR, která se nosí k poskytování zábavy a zmírnění nevolnosti z auta z úkolů, jako je čtení a práce, když je vozidlo v pohybu.

NA Patentová přihláška z července 2020 pokrývá možné vstupní metody s Apple Glasses a popisuje systém, kde brýle využívají infračervené snímání tepla k detekci, když se někdo dotkne předmětu ve skutečném světě, což umožňuje brýlím promítnout ovládací prvky na povrch skutečného světa.

Díky této metodě by brýle Apple mohly promítat v ovládacím rozhraní AR na jakýkoli skutečný objekt v reálném světě pro překryvný efekt smíšené reality.

Apple v únoru 2021 podal řadu patentů související s jeho prací na náhlavní soupravě se smíšenou realitou, o které se traduje, s patenty pokrývajícími designové prvky, úpravu čočky, technologii sledování očí a software.

Společnost Apple vyvinula několik metod, jak učinit náhlavní soupravu pohodlnější na nošení a zároveň ji udržet v bezpečí a blokovat pronikání světla, a navíc je zde podrobný systém nastavení čočky, který využívá kapalinu k hladkému posunu čoček, aby se přizpůsobila každému uživateli.

Apple také podrobně popisuje systém sledování očí, který používá infračervené světlo k detekci polohy, a existuje také patent na to, jak by bylo možné upravovat dokumenty ve virtuálním 3D prostoru pomocí náhlavní soupravy a detekce gest.

Apple má patentované systémy pro nahrávání videa z náhlavní soupravy, kde by vestavěné senzory pro sledování pohledu mohly poskytnout indikaci, kam se osoba aktuálně dívá, což by mohlo nasměrovat vestavěnou kameru k záznamu scény, kde jsou umístěny oči uživatele, namísto pouhého záznamu co je před uživatelem.

Další patentová přihláška podané v únoru 2021 ukázaly, že Apple zkoumá zařízení namontované na prstech s řadou senzorů a hmatovou zpětnou vazbou, které by bylo možné použít jako ovládací zařízení pro náhlavní soupravu se smíšenou realitou.

Ovládací zařízení má tvar, který umožňuje uživatelům přirozeně cítit předměty ve svém okolí a dokáže přesně určit způsob, jakým uživatel pohybuje prstem a interaguje s povrchy. Systém je údajně tak přesný, že dokáže detekovat, jak silně uživatel tlačí na povrch a přesný směr této síly, a v reakci tak poskytuje haptickou zpětnou vazbu.

Ve spojení s náhlavní soupravou AR nebo VR Apple říká, že toto zařízení namontované na prstu by mohlo „poskytnout uživateli pocit interakce na fyzické klávesnici, když uživatel klepe prsty na povrch stolu“ nebo „umožnit uživateli ovládat joystick“. -type input' pro hraní her pouze pomocí pohybu konečků prstů uživatele.

Datum spuštění

Analytik Applu Ming-Chi Kuo v říjnu 2021 uvedl, že nadcházející náhlavní souprava pro smíšenou realitu má bylo zpožděno nejdříve do konce roku 2022, přičemž výroba by měla začít ve čtvrtém čtvrtletí roku 2022.

Bloomberg také věří, že AR/VR headset, na kterém Apple pracuje, vyjde v roce 2022, zatímco AR brýle, které jsou ve vývoji, vyjdou později. Informace navrhla, že AR/VR headset bude uveden na trh v roce 2022, po němž budou následovat chytré brýle v roce 2023, ale toto je dřívější časová osa, než u produktu s brýlemi uvedly jiné zdroje.

Apple je údajně pozadu s testováním chytrých brýlí, na kterých se pracuje, což by mohlo vést ke zpoždění. Apple měl vstoupit do druhé fáze vývoje brýlí na začátku roku 2021, ale fáze dvě testování ještě nezačalo, takže sériová výroba v prvním čtvrtletí roku 2022 je neočekávaný .

Analytici Morgan Stanley nedávno uvedli, že AR náhlavní souprava se „blíží ke startu“ na základě počet patentů Apple zveřejnil. Analytici se domnívají, že patentové portfolio Applu pro jeho AR/VR headset je podobné patentovému portfoliu, které vybudovalo před uvedením Apple Watch.

Budoucí plány AR/VR

Apple analytik Ming-Chi Kuo se domnívá, že Apple by mohl plánovat „kontaktní čočky“ s rozšířenou realitou. mohl spustit někdy ve 30. letech 20. století.

Podle Kuo čočky přenesou elektroniku z éry „viditelného počítání“ do „neviditelného počítání“. V současné době nejsou kontaktní čočky „žádné viditelnosti“ a není to zaručený produkt, který Apple vyvine.