In den Onboarding-Videos von Vision Pro wird die Einrichtung einer FaceTime-Persona und mehr gezeigt
Die Persona-Registrierung für FaceTime sowie die Grundlagen der visionOS-Navigation mit Augen und Händen werden in zwei durchgesickerten Vision Pro-Onboarding-Videos behandelt.
Neue Onboarding-Videos aus der neuesten visionOS-Beta bieten einen tieferen Einblick in die Einrichtung des 3.500-Dollar-Headsets und die Erstellung einer FaceTime-Persona.
„Um Ihre Persona einzurichten, nehmen Sie Ihr Apple Vision Pro ab, um Ihr Erscheinungsbild einzufangen“, heißt es im Video. Apple empfiehlt, das Headset auf Augenhöhe zu halten, um eine genaue Darstellung Ihres Gesichts, Ihrer Arme und Schultern zu erhalten.
Das andere Video zeigt dem Benutzer, wie er durch die visionOS-Benutzeroberfläche navigieren kann, indem er einfach auf Bildschirmelemente blickt und Handgesten wie Tippen oder Kneifen mit zwei Fingern verwendet, um Aktionen wie Auswählen und Scrollen auszuführen.
Persona ist Ihr digitaler Avatar für FaceTime-Anrufe
Die Persona-Funktion löst das Problem, einen Vision Pro-Benutzer in einem Videoanruf auf FaceTime darzustellen, da das Headset sein Gesicht nicht aufzeichnen kann. Um diese Einschränkung zu überwinden, wendet visionOS Ihre Mimik und Handbewegungen auf Ihr digitales Selbst an. Die Teilnehmer des Anrufs sehen die Animation Ihres lebensechten Avatars in Echtzeit.
Neues Video-Tutorial zur Persona-Registrierung für Apple Vision Pro, hinzugefügt in visionOS Beta 6!
Bei der Registrierung wird die EyeSight-Anzeige zur Führung des Benutzers verwendet. pic.twitter.com/cGfsdTuIaY
– M1 (@M1Astra) 14. November 2023
Dies nennt man Persona. Während der Einrichtung von Vision Pro kann der Benutzer sein Gesicht mit dem Headset scannen. Sie werden angeleitet, eine Reihe von Kopfbewegungen auszuführen, die dem Einrichten von Face ID ähneln, z. B. den Kopf in alle Richtungen drehen und Gesichtsausdrücke wie Lächeln, Schließen der Augen und Hochziehen der Augenbrauen ausführen.
„Wenn Sie fertig sind, setzen Sie Apple Vision Pro wieder ein, um Ihre Persona zu sehen“, heißt es.
Augen- und Handverfolgung
Das visionOS-Betriebssystem nutzt interne und externe Sensoren und Kameras, um zu erkennen, wohin Ihr Blick gerichtet ist, und um Handgesten zu erfassen. Dies ist vielleicht einer der Aspekte des Headsets, der die ersten Rezensenten am meisten beeindruckt hat.
Neues Onboarding-Video in visionOS Beta 6 hinzugefügt!
„Input-Training“ pic.twitter.com/ThKGBL4FbA
– M1 (@M1Astra) 14. November 2023
„Sie durchsuchen das System, indem Sie schauen, und es reagiert auf Ihre Augen“, erklärt das Video. „Schauen Sie sich einfach ein Element an und tippen Sie mit den Fingern aufeinander, um es auszuwählen.“ Neben dem Fixieren und Tippen unterstützt visionOS auch andere Handgesten wie das Zusammenziehen zweier Finger und das sanfte Streichen, um den Inhalt in eine beliebige Richtung zu scrollen.
Treffen Sie Ihren digitalen Avatar für FaceTime-Anrufe
Bei der Registrierung werden die erfassten Daten an ein neuronales Netzwerk weitergeleitet, um Ihren digitalen Avatar zu erstellen. Das Demonstrationsvideo, das Apple auf der WWDC veröffentlichte, erklärt, dass das Unternehmen sein „fortgeschrittenes neuronales Encoder-Decoder-Netzwerk“ an einer „vielfältigen Gruppe von Tausenden von Personen“ für die Persona-Funktion trainiert hat.