Το Oculus Quest (τόσο το αρχικό όσο και το δεύτερο μοντέλο^{(second model)} ) έχουν μια ενδιαφέρουσα ιστορία χαρακτηριστικών που προστέθηκαν πολύ καιρό μετά την κυκλοφορία του υλικού στη φύση. Το πιο διάσημο από αυτά είναι το Oculus Link , το οποίο ουσιαστικά μετατρέπει το Quest σε Oculus Rift . Αυτή η δυνατότητα ήταν τόσο επιτυχημένη που η Oculus αποφάσισε να διακόψει όλα τα ακουστικά της εκτός από το Quest . 

Η παρακολούθηση χεριών^(Hand) δεν έχει κάνει την αίσθηση του Oculus Link , αλλά εξακολουθεί να είναι ένα εκπληκτικό χαρακτηριστικό με πολλές δυνατότητες. Με το hand-tracking δεν χρειάζεστε καθόλου ελεγκτές. Τα δικά σας χέρια ψηφιοποιούνται στον κόσμο του VR! 

Εάν έχετε ένα Quest ή σκέφτεστε να αγοράσετε ένα, αξίζει να μάθετε πώς λειτουργεί η παρακολούθηση χεριών και τι μπορεί να προσφέρει στην εμπειρία VR.

Πώς το Quest παρακολουθεί τον κόσμο

Το Oculus Quest χρησιμοποιεί μια καινοτόμο προσέγγιση για την παρακολούθηση κίνησης που συνήθως αναφέρεται ως παρακολούθηση "μέσα-έξω", η οποία είναι πολύ διαφορετική από τον τρόπο με τον οποίο λειτουργούσε η παρακολούθηση κίνησης στο παρελθόν. 

Όταν κυκλοφόρησαν τα πρώτα ακουστικά επόμενης γενιάς στα μέσα της δεκαετίας του 2010, χρησιμοποίησαν μία ή περισσότερες εξωτερικές κάμερες παρακολούθησης. Οι ειδικές λυχνίες παρακολούθησης κίνησης στο σετ μικροφώνου-ακουστικού έδειχναν στην κάμερα ακριβώς πού βρισκόταν το σετ μικροφώνου-ακουστικού σε σχέση με αυτό. Με κάποια έξυπνα μαθηματικά, αυτά τα δεδομένα θα μπορούσαν στη συνέχεια να μετατραπούν σε πολύ ακριβή παρακολούθηση κίνησης στον τρισδιάστατο χώρο. Αυτός είναι ο τρόπος με τον οποίο τα premium ακουστικά VR προσφέρουν «έξι βαθμούς ελευθερίας», γνωστά και ως 6DoF. 

Η Quest^(Quest) μετακινεί τον αισθητήρα της κάμερας στο ίδιο το σετ μικροφώνου-ακουστικού, τοποθετώντας τα σε στρατηγικά σημεία της συσκευής. Άλλα ακουστικά ενδέχεται να χρησιμοποιούν ακόμη περισσότερες κάμερες για να βελτιώσουν την ακρίβεια. Αυτές οι τέσσερις κάμερες επιτρέπουν στο Quest να κοιτάξει τον πραγματικό κόσμο γύρω σας και να καθορίσει ποια είναι η θέση σας σε αυτόν τον χώρο. 

Αυτό είναι που επιτρέπει στο Quest να είναι αυτόνομο και φορητό. Είναι επίσης το χαρακτηριστικό που επιτρέπει εξαρχής να είναι δυνατή η παρακολούθηση με το χέρι με το Oculus ..

Τα τυπικά χειριστήρια αφής Oculus^{(Standard Oculus Touch Controllers)}

Για να καταλάβουμε τι κάνει το Oculus hand tracking τόσο εντυπωσιακό, πρέπει να ξεκινήσουμε με τους μάλλον κοσμικούς φυσικούς ελεγκτές που συνοδεύουν το Oculus Quest . Κάθε ένα παρακολουθείται πλήρως από εσωτερικούς αισθητήρες και ειδικούς δείκτες παρακολούθησης κίνησης που λένε στις ενσωματωμένες κάμερες του Quest πού βρίσκονται τα χειριστήρια σε σχέση με τα ακουστικά.

Όταν κρατάτε τα χειριστήρια αφής σε VR, παρακολουθούνται με απίστευτη ακρίβεια. Χρησιμοποιώντας τα κουμπιά λαβής και σκανδάλης στο χειριστήριο, το λογισμικό VR μπορεί να δημιουργήσει μια πειστική εμπειρία αρπαγής και χειρισμού αντικειμένων. Αυτό χρησιμοποιείται με εξαιρετικό αποτέλεσμα σε παιχνίδια όπως το Half-Life Alyx και το The Climb^{(The Climb)} , όπου το κράτημα αντικειμένων στον κόσμο της εικονικής πραγματικότητας είναι κεντρικό μέρος του παιχνιδιού. 

Τα χειριστήρια αφής^{(Touch Controllers)} προσφέρουν επίσης απτική ανάδραση χάρη στις συσκευές που ονομάζονται «γραμμικοί ενεργοποιητές», οι οποίοι μπορούν να δημιουργήσουν σωματικά συναισθήματα πρόσκρουσης σε πράγματα, δονήσεις και άλλες αισθήσεις αφής. Τα μπαστούνια και τα κουμπιά προσφέρουν επίσης έναν οικείο τρόπο για να μετακινηθείτε σε έναν χώρο VR όταν δεν μπορείτε να μετακινηθείτε φυσικά στον πραγματικό σας χώρο.

Το κύριο μειονέκτημα αυτού σε σύγκριση με το hand-tracking είναι ότι έχετε γάντζους για τα χέρια. Μπορείτε να κάνετε απλές κινήσεις τσιμπήματος με τα εικονικά σας χέρια, αλλά μέχρι εκεί. Δεν είναι σημαντικός περιορισμός όταν τα παιχνίδια σχεδιάζονται γύρω από τα χειριστήρια, αλλά η παρακολούθηση χεριών ανοίγει ένα φάσμα νέων δυνατοτήτων στο VR.

Τι κάνει το Oculus Hand-Tracking

Όταν είναι ενεργοποιημένη η παρακολούθηση χεριών, θα δείτε μια ακριβή αναπαράσταση των πραγματικών χεριών σας στον κόσμο της εικονικής πραγματικότητας. Κάθε κίνηση των δακτύλων ή του καρπού σας θα αντικατοπτρίζεται στα εικονικά τους ντόπια.

Το Hand Tracking^{(Hand Tracking)} δεν είναι πλέον μια δυνατότητα beta του Quest . Είναι πλέον ενσωματωμένο στο λειτουργικό σύστημα και σε πολλές εφαρμογές Quest πρώτου κατασκευαστή. Το πρώτο σημαντικό πλεονέκτημα εδώ είναι ότι αν θέλετε απλώς να βάλετε γρήγορα το Quest σας και να παρακολουθήσετε μια ταινία σε VR ή να περιηγηθείτε στο κατάστημα εφαρμογών, δεν χρειάζεται να κάνετε την προσπάθεια να κολλήσετε τα χειριστήρια αφής. Χρησιμοποιώντας μόνο τα χέρια σας, μπορείτε να αποκτήσετε πρόσβαση στα μενού του συστήματος και να περιηγηθείτε με ευκολία.

Τώρα που η παρακολούθηση με το χέρι είναι επίσημο χαρακτηριστικό του Quest , οι προγραμματιστές εφαρμογών τρίτων μπορούν να το προσθέσουν στις εφαρμογές τους. Υπάρχει ήδη ένας αριθμός εφαρμογών που κάνουν εξαιρετική χρήση της δυνατότητας παρακολούθησης χειρός Oculus , αλλά είμαστε σίγουροι ότι οι προγραμματιστές θα βρουν πολλούς πιο συναρπαστικούς τρόπους με τους οποίους η άμεση παρακολούθηση με το χέρι μπορεί να μεταμορφώσει την εμπειρία VR

Πώς λειτουργεί το Oculus Hand-Tracking

Τα αποτελέσματα του hand-tracking είναι αρκετά εκπληκτικά, αλλά πώς λειτουργεί στην πραγματικότητα; Προφανώς η Oculus δεν πρόκειται να δημοσιεύσει τις ακριβείς λεπτομέρειες της αποκλειστικής λύσης της, αλλά γνωρίζουμε τις τεχνολογίες και τις αρχές που εμπλέκονται.

Πρώτον, οι ενσωματωμένες κάμερες είναι απαραίτητες για τη λειτουργία της παρακολούθησης με το χέρι. Όχι μόνο παρέχουν στερεοσκοπικές πληροφορίες βάθους, αλλά και οπτικά δεδομένα για επεξεργασία με μηχανική όραση. Τι είναι η μηχανική όραση; Είναι ένας κλάδος της τεχνητής νοημοσύνης^{(artificial intelligence)} , συγκεκριμένα ένας τομέας γνωστός ως μηχανική μάθηση. Είναι η ίδια τεχνολογία που επιτρέπει στην εφαρμογή κάμερας του τηλεφώνου σας να αναγνωρίζει γρήγορα πρόσωπα σε μια φωτογραφία.

Ουσιαστικά, το λογισμικό πρέπει να μάθει τι στα δεδομένα εικόνας που παρέχει η κάμερα είναι ένα χέρι και τι όχι ένα χέρι. Αυτό πιθανότατα έγινε δείχνοντας στο λογισμικό χιλιάδες και χιλιάδες χέρια σε διαφορετικά περιβάλλοντα μέχρι να μπορέσει να βρει αξιόπιστα έναν γρήγορο και αποτελεσματικό τρόπο να τα ξεχωρίσει από οτιδήποτε άλλο στο δωμάτιό σας.

Μόλις το λογισμικό μπορεί να δημιουργήσει ακριβή εικονικά μοντέλα των χεριών σας σε πραγματικό χρόνο, οι προγραμματιστές εφαρμογών μπορούν να τα χρησιμοποιήσουν για οτιδήποτε σκεφτούν. Τώρα μπορείτε να χειριστείτε με ακρίβεια αντικείμενα στο VR!

Χειροκίνητες εμπειρίες που αξίζει να δοκιμάσετε

Εάν διαθέτετε ένα Oculus Quest , μπορείτε να δοκιμάσετε τη λειτουργία παρακολούθησης χειρός Oculus χωρίς να χρειάζεται να αγοράσετε κάποια συγκεκριμένη εφαρμογή. Όπως αναφέρθηκε παραπάνω, λειτουργεί στο κύριο περιβάλλον Quest καθώς και σε μερικές εφαρμογές πρώτου κατασκευαστή. Όταν πρόκειται για εμπειρίες τρίτου μέρους, υπάρχουν μερικές που αξίζει να επισημανθούν.

Το The Line^{(The Line)} είναι μια εμπειρία αφήγησης 4,99 $ που χρησιμεύει επίσης ως ένα τέλειο τεχνολογικό επίδειξη για παρακολούθηση χεριών. Αφηγείται την ιστορία μιας πόλης μοντέλο σε κλίμακα που τρέχει με ρολόι και πίστες. 

Ο ήρωάς μας Πέδρο^(Pedro) είναι ερωτευμένος με τη Ρόζα^(Rosa) , αλλά δεν μπορεί να ξεφύγει από τη μοίρα του. Μέχρι να συμβεί κάτι νέο μια μέρα. Αλληλεπιδράτε με τον κόσμο των μοντέλων της κλίμακας χρησιμοποιώντας το χέρι σας για να περιστρέφετε πόμολα, να τραβάτε μοχλούς και να παίζετε με ό,τι μπορείτε. Είναι μια γραμμική, σύντομη εμπειρία, αλλά μπορεί να αναδείξει το hand-tracking με πολύ διασκεδαστικό τρόπο σε περίπου 15 λεπτά.

Το Waltz of the Wizard^{(Waltz of the Wizard)} (9,99 $) είναι μια άλλη εξαιρετική βιτρίνα της τεχνολογίας. Μπορείτε να χρησιμοποιήσετε τα χέρια σας για να κάνετε ξόρκια και να αλληλεπιδράσετε σχεδόν με τα πάντα στον κόσμο της εικονικής πραγματικότητας γύρω σας. Αν θελήσατε ποτέ να ζήσετε τη φαντασία του να είστε μάγος που μπορεί να πυροβολήσει τα μπουλόνια φωτισμού από τα χέρια του, αυτό είναι το παιχνίδι για εσάς!

Ποια είναι η γνώμη σας για το hand tracking στο Quest ; Το έχεις δοκιμάσει? Ποια παιχνίδια θα προτείνατε; Μοιραστείτε^(Share) τις γνώσεις σας στα σχόλια.

How Oculus Quest Hand Tracking Technology Works

Τhe Oculus Quest (both the original and second model) have an interesting history of features being added long after the hardware is out in the wild. The most famous of these is Oculus Link, which effectively turns the Quest into an Oculus Rift. This feature was so successful that Oculus decided to discontinue all their headsets but the Quest. 

Hand tracking hasn’t made quite the splash Oculus Link did, but it’s still an amazing feature with lots of potential. With hand-tracking you don’t need controllers at all. Your own hands are digitized into the VR world! 

If you have a Quest or are thinking of buying one, it’s worth knowing how hand tracking works and what it can bring to the VR experience.

How Quest Tracks the World

The Oculus Quest uses an innovative approach towards motion tracking that’s commonly referred to as “inside-out” tracking, which is very different from how motion tracking worked in the past. 

When the first next-generation headsets were released in the mid-2010s, they made use of one or more external tracking cameras. Special motion tracking lights on the headset told the camera exactly where the headset was in relation to it. With some clever math, that data could then be converted to very accurate motion tracking in 3D space. This is how premium VR headsets offer “six degrees of freedom”, also known as 6DoF. 

Quest moves the camera sensor onto the headset itself, in this case placing them in strategic spots on the device. Other headsets may use even more cameras to improve accuracy. These four cameras let the Quest look at the real world around you and determine what your position is within that space. 

That’s what allows the Quest to be self-contained and portable. It’s also the feature that allows for hand-tracking with the Oculus to be possible in the first place..

The Standard Oculus Touch Controllers

To understand what makes Oculus hand tracking so impressive, we have to start with the rather mundane physical controllers that come with the Oculus Quest. Each one is fully motion-tracked by internal sensors and special motion tracking markers that tell the Quest’s onboard cameras where the controllers are relative to the headset.

When you’re holding the touch controllers in VR, they’re tracked with uncanny accuracy. Using the grip and trigger buttons on the controller, VR software can create a convincing experience of grabbing and manipulating items. This is used to great effect in games such as Half-Life Alyx and The Climb, where gripping items in the VR world is a central part of gameplay. 

The Touch Controllers also offer haptic feedback thanks to devices called “linear actuators”, which can create physical feelings of bumping into things, vibration and other touch sensations. Thumbsticks and buttons also offer a familiar way to move around a VR space when you can’t physically move about in your real space.

The main disadvantage of this compared to hand-tracking is that you have hooks for hands. You can perform simple pinching movements with your virtual hands, but that’s the extent of it. It doesn’t feel like a major limitation when games are designed around the controllers, but hand tracking opens a spectrum of new possibilities in VR.

What Oculus Hand-Tracking Does

When hand tracking is enabled, you’ll see an accurate representation of your real hands within the VR world. Each movement of your fingers or wrist will be reflected in their virtual doppelgangers.

Hand Tracking is no longer a beta feature of Quest. It’s now integrated into the operating system and many first party Quest applications. The first major benefit here is that if you just quickly want to put on your Quest and watch a movie in VR or browse around the app store, you don’t have to go through the effort of strapping on the touch controllers. Using just your hands, you can access system menus and navigate around with ease.

Now that hand-tracking is an official feature of Quest, third-party app developers can add it to their apps. There are already a number of apps that make excellent use of the Oculus hand-tracking feature, but we’re sure developers will find many more exciting ways in which direct hand-tracking can transform the VR experience

How Oculus Hand-tracking Works

The results of hand-tracking are pretty amazing, but how does it actually work? Obviously Oculus isn’t going to publish the exact details of their proprietary solution, but we do know the technologies and principles involved.

First, the on-board cameras are essential to making hand-tracking work. Not only do they provide stereoscopic depth information, but also visual data for processing by machine vision. What’s machine vision? It’s a branch of artificial intelligence, specifically a field known as machine learning. It’s the same technology that lets your phone’s camera app quickly identify faces in a photo.

Essentially, the software has to learn what in the image data provided by the camera is a hand and what isn’t a hand. This was probably done by showing the software thousands and thousands of hands in different environments until it could reliably figure out a fast and effective way of telling them apart from everything else in your room.

Once the software can create accurate, real-time virtual models of your hands, app developers can use them for anything they can think of. You can now precisely manipulate objects in VR!

Hand-tracked Experiences Worth Trying

If you own an Oculus Quest you can try out the Oculus hand-tracking feature without having to buy any particular app. As mentioned above, it works in the main Quest environment as well as a few first-party apps. When it comes to 3rd-party experiences, there are a few worth highlighting.

The Line is a $4.99 narrative experience that also serves as a perfect tech-demo for hand tracking. It tells the tale of a scale model town that runs on clockwork and tracks. 

Our hero Pedro is in love with Rosa, but he can’t escape his fate. Until something new happens one day. You interact with their scale model world by using your hand to turn knobs, pull levers and fiddle with everything that you can. It’s a linear, short experience, but can show off hand-tracking in a very entertaining way in about 15 minutes.

Waltz of the Wizard ($9.99) is another excellent showcase of the technology. You can use your hands to cast spells and interact with just about everything in the VR world around you. If you’ve ever wanted to live out the fantasy of being a wizard who can shoot bolts of lighting from their hands, this is the game for you!

What do you think of hand tracking on Quest? Have you tried it? Which games would you recommend? Share your insights in the comments.

Related posts

• Πώς να παίξετε ασύρματα παιχνίδια PC VR στο Oculus Quest με εικονική επιφάνεια εργασίας

• Πώς λειτουργεί το Xbox Streaming σε υπολογιστή

• Πώς να παίξετε παιχνίδια SteamVR στο Oculus Quest 2

• 8 καλύτερα δωρεάν παιχνίδια στο Oculus Quest 2

• Πώς να ρυθμίσετε το Air Link στο Oculus Quest 2

• Μπορείτε να χρησιμοποιήσετε πληκτρολόγιο και ποντίκι για παιχνίδια κονσόλας;

• Πώς να φτιάξετε φίλτρα στο Minecraft

• Πώς να προσθέσετε παιχνίδια εκτός Steam στη βιβλιοθήκη σας στο Steam

• 8 καλύτερα παιχνίδια προγράμματος περιήγησης FPS που μπορείτε να παίξετε στο διαδίκτυο τώρα

• Πώς να μοιραστείτε παιχνίδια στο Steam

• Τα καλύτερα ενσύρματα και ασύρματα ακουστικά παιχνιδιών

• Monitor vs TV για Gaming; Υπάρχει καλύτερη επιλογή;

• 8 Παιχνίδια υπολογιστή με υπέροχες ιστορίες

• Τι είναι ο κωδικός Konami και πώς τον χρησιμοποιείτε;

• Twitch εναντίον YouTube: Τι είναι καλύτερο για ροή;

• Τι είναι το PS4 Safe Mode και πότε πρέπει να το χρησιμοποιήσετε;

• Αξίζουν τα πληκτρολόγια παιχνιδιών με το ένα χέρι;

• Αξιολόγηση ASUS TUF GAMING Z490-PLUS (WI-FI): Εξαιρετική μητρική πλακέτα!

• Τι είναι το Roll20 Dynamic Lighting και πώς να το χρησιμοποιήσετε;

• 14 τρόποι για να μειώσετε το Ping σας και να βελτιώσετε το διαδικτυακό παιχνίδι