De nieuwe, revolutionaire Vision Pro AR/VR-kit van Apple houdt de wereld momenteel in zijn greep. Het ziet eruit als een apparaat uit de toekomst, maar ook als gewone ski-bril uit de jaren 90. Maar het is niet zozeer het uiterlijk dat belangrijk is bij de Vision Pro, het draait om wat er binnenin gebeurt. De sensoren in dit apparaat maken het begin van ruimtelijk computergebruik mogelijk en zullen naar verwachting de huidige game-ervaring transformeren.
Om te begrijpen hoe Vision Pro werkt en wat ermee bereikt kan worden, moeten we in detail kijken naar de technologie ervan.
Allereerst kijken we naar de camera’s:
Op de buitenkant van het apparaat bevinden zich twee camera’s met hoge resolutie en zes wereld-volg-camera’s. Deze camera’s leggen de omgeving stereoscopisch in 3D vast. Zoals je waarschijnlijk weet, kun je met Vision Pro foto’s maken en video’s opnemen van wat je ziet, en daar zijn de belangrijkste camera’s voor bedoeld. De belangrijkste interface van Vision Pro, genaamd Home View, kan worden benaderd via applicaties en ervaringen en wordt bediend met oogbewegingen en handgebaren. Kijk gewoon naar een icoon en tik met je vingers om het te selecteren. Daarom zijn er zoveel wereld-volg-camera’s gericht op de externe wereld – ze stellen Vision Pro in staat om zelfs de kleinste bewegingen van je vingers te detecteren. Met hun hulp kun je bijvoorbeeld inzoomen op een foto door naar de hoek te kijken en deze met je vingers te verplaatsen – een kleine handbeweging die Vision Pro kan detecteren met behulp van de zes volg-camera’s.
Laten we nu een kijkje nemen binnenin het apparaat:
Bij Vision Pro is oogbeweging (niet EyeSight, iets anders) van cruciaal belang. Het moet in staat zijn om oogbewegingen binnen de kit te onderscheiden, en dit is mogelijk dankzij vier interne infraroodvolg-camera’s die elke oogbeweging vastleggen. Met deze vier camera’s kun je gewoon naar een icoon op het Home View-interface kijken en het wordt geselecteerd. Maar Vision Pro bevat ook nog een andere interne camera, namelijk de TrueDepth-camera, die gebruikersauthenticatie mogelijk maakt. TrueDepth-camera’s werden voor het eerst geïntroduceerd in iPhones voor de Face ID-technologie en bevatten de meest geavanceerde componenten en software die door Apple zijn ontwikkeld om nauwkeurige gezichtsgegevens te verzamelen. Er worden duizenden onzichtbare punten op je gezicht geprojecteerd om een diepte kaart te creëren, en ook infraroodbeelden worden vastgelegd. We zijn niet zeker of Vision Pro over het hele gezicht werkt of alleen in het gebied rond de ogen, maar het maakt zeker gebruik van de TrueDepth-technologie om zijn doelen te bereiken.
Laten we nu eens kijken naar de beschikbare LiDAR-scanners:
LiDAR is een andere technologie die Apple al eerder heeft gebruikt in zijn high-end iPhones en iPads. LiDAR staat voor “Light Detection and Ranging” en is een apparaat dat een laserstraal uitzendt, waardoor nauwkeurige metingen van afstanden tot objecten in de omgeving mogelijk zijn. Apple beweert dat de iPhone met de LiDAR-scanner betere foto’s kan maken bij weinig licht en de camera kan helpen bij sneller autofocus, zodat je het perfecte moment niet mist. Je hoeft hiervoor niets te doen – richt gewoon de camera in het donker en maak een foto. Apple heeft ook een gratis Measure-app die de LiDAR-scanner gebruikt voor afstandsmeting. Wat is dan het doel van de LiDAR-scanner in Vision Pro? Welnu, Vision Pro gebruikt de omgeving om zijn hoofdscherm te plaatsen, dus het moet weten hoe dicht je bij muren en meubels bent. Dit wordt mogelijk gemaakt met de LiDAR-scanner die in de Vision Pro-kit is opgenomen.
Vier interne meetunits:
Interne meetunits (IMU) worden meestal gebruikt in drones. Het zijn apparaten die informatie leveren van sensoren zoals gyroscopen en versnellingsmeters om gegevens over versnelling en oriëntatie te leveren, waardoor metingen van kanteling, pitch en yaw mogelijk zijn. Ze kunnen ook worden gebruikt om positie en snelheid te berekenen. Vision Pro maakt gebruik van IMU’s om zich bewust te blijven van zijn positie in de ruimte, omdat van gebruikers niet kan worden verwacht dat ze stil blijven staan terwijl ze augmented reality ervaren.
Flikker sensor:
De flikkersensor werd door Apple geïntroduceerd bij de iPhone 7. Het detecteert flikkeren van kunstlicht en compenseert dit bij het nemen van foto’s en video’s. Aangezien Vision Pro voornamelijk binnenshuis wordt gebruikt met kunstlicht, is het logisch waarom Apple dit heeft opgenomen om ervoor te zorgen dat de beelden die via de Vision Pro-kit worden verzonden niet flikkeren door kunstlicht.
Omgevingslichtsensor:
De laatste sensor in de Apple Vision Pro-kit is de omgevingslichtsensor. Deze sensor past de helderheid van het display aan de omgeving aan. Het is te vinden in verschillende Apple-producten, zoals de Apple Watch of iOS-apparaten, maar de bekendste toepassing is het verlichten van het toetsenbord van de MacBook bij weinig licht. Vision Pro zal uiteraard zo’n sensor nodig hebben, omdat het moet weten hoe helder het display moet zijn, afhankelijk van of het overdag of in het donker wordt gebruikt.
Microfoons?
Ten slotte, laten we eens kijken naar de microfoons. Hoewel Apple niets loslaat over het doel van de zes microfoons in de Vision Pro-kit, kan men speculeren dat ze een doel dienen dat verder gaat dan alleen spraakopdrachten, bijna als sensoren. Waarschijnlijk scannen ze de akoestiek van de kamer om de illusie van augmented reality te creëren en geluid op dezelfde plek te houden terwijl je je hoofd draait.
We zullen deze sectie en de rest van het artikel bijwerken met informatie over Vision Pro-sensoren zodra we meer weten.
Veelgestelde vragen gebaseerd op de belangrijkste onderwerpen in het artikel:
Cameravragen
1. Hoeveel camera’s heeft de Vision Pro AR/VR-kit van Apple?
De Vision Pro-kit van Apple heeft twee hoofdcamera’s aan de buitenkant en zes wereld-volg camera’s.
2. Wat is het doel van de hoofdcamera’s?
De hoofdcamera’s worden gebruikt om foto’s te maken en video’s op te nemen van wat je ziet met de Vision Pro-kit.
3. Wat is de functie van de wereld-volg camera’s?
De wereld-volg camera’s maken het mogelijk voor Vision Pro om zelfs de kleinste bewegingen van je vingers te detecteren.
LiDAR-vragen
1. Wat betekent LiDAR?
LiDAR staat voor “Light Detection and Ranging” en is een apparaat dat een laserstraal uitzendt om nauwkeurige metingen van afstanden tot objecten te maken.
2. Waarvoor wordt de LiDAR-scanner in Vision Pro gebruikt?
In Vision Pro wordt de LiDAR-scanner gebruikt om de afstand tot muren en meubels te meten, zodat het apparaat het hoofdscherm correct kan plaatsen.
IMU-vragen
1. Wat zijn interne meetunits?
Interne meetunits (IMU’s) zijn apparaten die informatie leveren over versnelling en oriëntatie, waardoor metingen van kanteling, pitch en yaw mogelijk zijn.
2. Waarom gebruikt Vision Pro IMU’s?
Vision Pro maakt gebruik van IMU’s om zich bewust te blijven van zijn positie in de ruimte, zodat gebruikers niet stil hoeven te blijven staan tijdens het ervaren van augmented reality.
Overige vragen
1. Waarom heeft Vision Pro een flikkersensor?
Vision Pro heeft een flikkersensor om te voorkomen dat de beelden die via het apparaat worden verzonden flikkeren door kunstlicht.
2. Wat is het doel van de microfoons in de Vision Pro-kit?
Hoewel het doel van de zes microfoons nog niet bekend is, wordt gespeculeerd dat ze mogelijk worden gebruikt om de akoestiek van de kamer te scannen en geluid in augmented reality op dezelfde plek te houden tijdens het draaien van het hoofd.
Bronnen:
– Apple: www.apple.com
The source of the article is from the blog tvbzorg.com