TL;DR
- Η Meta παρουσίασε έναν νέο τρόπο ψηφιακής χαρτογράφησης ενός δωματίου, που ονομάζεται SceneScript.
- Το SceneScript είναι σε θέση να αναγνωρίζει αυτόματα αντικείμενα και χαρακτηριστικά δωματίου όπως τοίχους, καναπέδες και τραπέζια με τη βοήθεια AI.
- Τα δεδομένα που προκύπτουν μπορούν να χρησιμοποιηθούν από LLM για να απαντήσουν σε ερωτήσεις σχετικά με το δωμάτιο.
Η Meta παρουσίασε μια νέα μέθοδο για τη σάρωση ενός δωματίου που ονομάζεται SceneScript. Αυτός ο νέος τρόπος σάρωσης δωματίου θα μπορούσε να κάνει τη διαδικασία ταχύτερη και ευκολότερη Ακουστικά Questκαι θα μπορούσε να έχει και άλλες χρήσιμες συνέπειες.
Προτού χρησιμοποιήσετε ένα σετ μικροφώνου-ακουστικού εικονικής πραγματικότητας, συνιστάται να σαρώσετε το δωμάτιο έτσι ώστε να μπορούν να οριστούν τα όρια. Με αυτόν τον τρόπο δεν χρειάζεται να ανησυχείτε μήπως προσκρούσετε σε διάφορα αντικείμενα καθώς η όρασή σας είναι σκοτεινή. Η σάρωση δωματίου χρησιμοποιείται επίσης για AR για την ακριβή αγκύρωση και ευθυγράμμιση του τρισδιάστατου περιεχομένου στον εσωτερικό χώρο στον οποίο βρίσκεστε. Ωστόσο, ο τρέχων τρόπος με τον οποίο γίνεται η σάρωση δωματίου μπορεί να είναι λίγο περίπλοκος και μη φιλικός προς το χρήστη.
Σε μια αναλυτική Θέματα δημοσίευσης, Ο Διευθυντής Έργου Meta Research Edward Miller παρουσίασε το SceneScript, το οποίο στοχεύει στην επίλυση αυτού του προβλήματος. Σύμφωνα με τον Miller, η τεχνολογία χρησιμοποιεί AI για να αναγνωρίζει αυτόματα αντικείμενα και χαρακτηριστικά δωματίου όπως τοίχους, καναπέδες, τραπέζια, οροφές και πολλά άλλα. Έτσι, αντί να χρειάζεται να χαρτογραφήσετε χειροκίνητα αυτά τα πράγματα, το AI το κάνει για εσάς καθώς κοιτάτε τριγύρω.
Το Vision Pro της Apple είναι επίσης σε θέση να χαρτογραφήσει αυτόματα ένα δωμάτιο. Ωστόσο, το σετ μικροφώνου-ακουστικού δεν είναι σε θέση να αναγνωρίσει και να επισημάνει αντικείμενα όπως το SceneScript.
Εκτός από τη δουλειά της χαρτογράφησης δωματίου για εσάς, ο Miller λέει ότι τα δεδομένα μπορούν να χρησιμοποιηθούν με chatbots όπως το Llama 2 για να θέσουν ερωτήσεις σχετικά με την περιοχή. Για παράδειγμα, ο χρήστης θα μπορούσε να ρωτήσει “Πόσα δοχεία μπογιάς θα χρειαζόταν για να βάψει αυτό το δωμάτιο;” Το Llama 2 θα μπορούσε πιθανώς να απαντήσει σε αυτές τις ερωτήσεις εάν επιλέξετε να μοιραστείτε τα δεδομένα δωματίου με το LLM.
Σε ένα ανάρτηση, η Meta λέει ότι το SceneScript θα μπορούσε να «ξεκλειδώσει τις βασικές θήκες χρήσης τόσο για ακουστικά MR όσο και για μελλοντικά γυαλιά AR», όπως η παροχή βήμα προς βήμα πλοήγησης για άτομα με προβλήματα όρασης. Η εταιρεία δηλώνει επίσης ότι η τεχνολογία θα μπορούσε να «ξεκλειδώσει τις δυνατότητες των ψηφιακών βοηθών επόμενης γενιάς, παρέχοντάς τους το φυσικό περιβάλλον που είναι απαραίτητο για να απαντήσουν σε περίπλοκα χωρικά ερωτήματα».
Η Meta δεν λέει αν θα φέρει την τεχνολογία στο Meta Quest 3 ή στο εισερχόμενο Meta Quest 3 Lite. Αλλά αυτή θα ήταν μια μεγάλη αναβάθμιση για τη λειτουργία Guardian των ακουστικών.