Μην αφήσετε το όνομα του Open-TeleVision Το έργο σας ξεγελάει. είναι ένα πλαίσιο για τη βελτίωση της τηλεπαρουσίας και για να γίνει η ρομποτική τηλελειτουργία πολύ πιο διαισθητική από ό,τι θα ήταν διαφορετικά. Αυτό το επιτυγχάνει εν μέρει εκμεταλλευόμενος την αξιοσημείωτη τεχνολογία που είναι συσκευασμένη σε σύγχρονα ακουστικά VR, όπως το Apple Vision Pro και το Meta Quest. Υπάρχουν πολλά βίντεο στη σελίδα του έργου, πολλά από τα οποία δείχνουν επιτυχημένη τηλελειτουργία σε τεράστιες αποστάσεις.
Η τηλελειτουργία των ρομποτικών τελεστών συνήθως απαιτεί κάποια εξοικείωση. Οι προβολές της κάμερας είναι ασυνήθιστες, τα άκρα δεν κινούνται με τον ίδιο τρόπο που κινούνται τα χέρια και τα διαισθητικά ανθρώπινα πράγματα όπως το να κοιτάς γύρω σου για να καταλάβεις πού είναι όλα δεν μεταφράζονται καλά.
Για να αντιμετωπιστεί αυτό, οι έρευνες παρείχαν σε έναν χρήστη μια στερεοφωνική ροή βίντεο σε πραγματικό χρόνο τοποθετημένη σε ρομπότ (μέσω της οποίας ο χρήστης μπορεί να γυρίσει το κεφάλι του και να κοιτάξει γύρω του κανονικά) καθώς και να χαρτογραφήσει τις κινήσεις των χεριών και των χεριών σε ανθρωποειδή ρομποτικά αντίστοιχα. Αυτό παρέχει την ανατροφοδότηση για το χειρισμό αντικειμένων και την εκτέλεση εργασιών με πολύ πιο διαισθητικό τρόπο. Εν ολίγοις, όταν τα μάτια, το σώμα και τα χέρια μας φαίνονται και λειτουργούν περισσότερο ή λιγότερο όπως περιμένουμε, αποδεικνύεται ότι είναι πολύ πιο εύκολο να εκτελέσουμε εργασίες.
ο ερευνητική εργασία αναφέρεται σε λεπτομέρειες για τα διαφορετικά συστήματα, αλλά στην ουσία, μια στερεοφωνική κάμερα βάθους και RGB είναι τοποθετημένη με ένα 3D εκτυπωμένο αντίζυγο πάνω από ένα ανθρωποειδές πλαίσιο ρομπότ όπως το Unitree H1 εξοπλισμένο με χέρια υψηλής επιδεξιότητας. Ένα ακουστικό VR φροντίζει να εμφανίζει μια στερεοσκοπική ροή βίντεο σε πραγματικό χρόνο και να αφήνει τον χρήστη να κοιτάξει γύρω του. Η παρακολούθηση χεριών για τον χρήστη αντιστοιχίζεται στα επιδέξια χέρια και δάχτυλα. Αυτό επιτρέπει σε ένα άτομο να κοιτάζει, να χειρίζεται και να χειρίζεται τα πράγματα χωρίς εις βάθος εκπαίδευση. Ίσως πιο αργά και πιο αδέξια από ό,τι θα ήθελαν, αλλά με έναν διαισθητικό τρόπο παρόλα αυτά.
Ενδιαφέρεστε να ρίξετε μια πιο προσεκτική ματιά; ο Αποθετήριο GitHub έχει τον απαραίτητο κωδικό και ενώ οι περισσότεροι από εμάς δεν θα πολτοποιήσουμε ποτέ την ΠΡΟΣΘΗΚΗ ΣΤΟ ΚΑΛΑΘΙ σε κάτι σαν το Unitree H1, η σχεδίαση αναφοράς για στερεοφωνική κάμερα που μεταδίδεται σε ακουστικά VR και αντανάκλαση κεφαλής παρακολούθησης με αντίζυγο δύο κινητήρων μοιάζει με το είδος πράγμα που θα ήταν χρήσιμο για α έργο τηλεπαρουσίας ή δύο.