Freisprechfernsteuerung virtueller Umgebungen über eine neue Schnittstelle

In Filmen sehen wir manchmal, dass Charaktere Telekinese verwenden und Objekte bewegen, ohne sie zu berühren. Natürlich sind Spezialeffekte, ob sie einfach auf Drähten mit vollem CGI basieren, das, was wirklich hinter der Bewegung steckt.

Sie können sogar die Illusion einer Telekinese im wirklichen Leben mit der richtigen Kombination aus Drähten, falschen Wänden, willigen Teilnehmern, die für einige Stunts bereit sind, und einer Einstellung erzeugen, die Ihnen ein Publikum bringt, das sich des Aufbaus nicht bewusst ist.

Das sehen Sie in diesem Video eines Setups für einen ausgeklügelten Streich in einem gewöhnlichen Café :

Aber Telekinese ist mit Hilfe der Technologie möglich - solange Sie sich darauf beschränken, Objekte in der virtuellen Realität zu manipulieren. Daraus stammt die Erfindung. STRG-Labore aktiviert, wie Sie in dieser Videodemonstration sehen können :

Mit dem STRG-Kit können Sie die Geschwindigkeit von Objekten im 3D-Raum mit den Händen erfassen und fein steuern. Es ermöglicht Menschen, mit virtuellen Umgebungen so zu interagieren, wie wir auf natürliche Weise mit der realen Welt interagieren.

VERBINDUNG: DIE GESCHICHTE UND WISSENSCHAFT DER VIRTUELLEN REALITÄTS-HEADSETS

Die Technologie wurde im Dezember 2018 vorgestellt, als der CEO von CTRL-Labs, Thomas Reardon, den Teilnehmern von Slush das CTRL-Kit vorstellte, ein nicht-invasives Elektromyographiegerät, das neuronale Signale in Kontrolle umwandelt. Mit dem CTRL-Kit SDK und der API können Entwickler integrierenneuronale Steuerung in XR-, Robotik-, Produktivitäts- und klinische Forschungsanwendungen.

Siehe das Video seiner Präsentation unten :

Um weitere Einblicke in diese Mensch-Maschine-Schnittstelle zu erhalten, habe ich einige Fragen an gesendet. Adam Berenzweig, Direktor für Forschung und Entwicklung bei CTRL-Labors. Sie werden als Überschriften über seinen Antworten unten angezeigt.

Ist Ihr am Handgelenk festgeschnalltes Gerät Ihr Hauptaugenmerk?

Ja, unser Hauptaugenmerk und Produkt liegt auf dem CTRL-Kit, einem tragbaren, nicht-invasiven neuronalen Schnittstellengerät und SDK, das neuronale Signale mit Einzelneuronenauflösung direkt decodiert. Das Gerät sitzt genau auf dem Unterarm und erfasst die Absicht amOberfläche der Haut. Mit dieser Hardware können XR-Entwickler, Robotiker, Designer und Forscher zusammen mit unserem SDK personalisierte neuronale Steuerungserfahrungen erstellen.

Was hat Ihr Unternehmen dazu veranlasst, diese Erfindung weiterzuverfolgen?

Wir haben das CTRL-Kit erfunden, um das grundlegende Problem anzugehen, dass die menschliche Leistung - unsere Fähigkeit, Dinge zu tun und zu produzieren - durch die unnatürlichen und unpersönlichen Kontrollschemata bestehender Geräte nachteilig eingeschränkt wird. Während Menschen eine bemerkenswerte Fähigkeit zum Konsumieren und Verarbeiten habenInformationen, aktuelle Technologien beschränken die menschliche Ausgabebandbreite mit einer unvermeidbaren Reibungsschicht.

Wir haben die Notwendigkeit einer völlig neuen Art von Technologie erkannt, die das Nervensystem entschlüsselt und sich Ihren Absichten anpasst. Aktuelle allgegenwärtige Eingabeparadigmen erfordern steile Lernkurven.

Touchscreens sind fehleranfällig und haben Schwierigkeiten, Druck wahrzunehmen. Computer Vision erfordert eine Sichtverbindung zum Motiv, was zu Latenz und Okklusion führt.

Um dieses Problem zu beseitigen, bauen wir ein Gerät, das Absichten über die körpereigene Ausgangssignalquelle erfasst: das neuromuskuläre System. Wir haben ein CTRL-Kit entwickelt, um neuronale Signale auf der Oberfläche des Unterarms zu dekodieren und Absichten mühelos und zuverlässig umzuwandelnAktionen.

Das obige Video zeigt dies in Aktion. “Das STRG-Kit erkennt die Absicht zu springen, bevor ein Finger überhaupt auf die Tastatur trifft. Dino Game kann ohne Tastatur, mit verschränkten Armen oder sogar mit den Händen in der Tasche gespielt werden. ”

Wie lange hat es gedauert, den Prototyp zu perfektionieren?

CTRL-labs wurde 2015 gegründet und wir haben 2018 die aktuelle Version des CTRL-Kits öffentlich angekündigt, die jetzt in den Händen ausgewählter Entwickler liegt.

Beschweren sich Leute darüber, dass sie ein Gerät halten müssen, um in einer VR-Umgebung zu interagieren?

Ja, viele VR-Entwickler beschweren sich darüber, dass sie ein Gerät halten müssen. Bestehende Hardware wie Valves Knuckles-Controller zeigen, dass dies ein zentraler Schmerzpunkt in der VR-Branche ist. Hoch artikulierte und ausdrucksstarke Hände sind für ein großartiges immersives Erlebnis von entscheidender Bedeutung. .

Aus diesem Grund haben wir das CTRL-Kit für das Tragen am Unterarm entwickelt, um Benutzern mehr Bewegungsfreiheit zu geben und das Problem der Einschränkung zu lösen, indem sie ein Gerät in den Händen halten müssen.

Im obigen Video können Sie sehen, wie Benutzer Videospiele spielen können, ohne eine manuell gesteuerte Steuerung zu verwenden. “ Hören Sie auf, den Controller zu spielen, spielen Sie das Spiel. ”Ist der ansprechende Vorschlag, den das CTRL-Kit bietet.

Ist es nur für VR-Spiele nützlich oder erwarten Sie andere Verwendungszwecke?

VR ist einer von vielen Anwendungsfällen für CTRL-Kits. Neben XR-Entwicklern gehören zu unseren Partnern für den frühen Zugriff Robotiker, Designer und wissenschaftliche Forscher. CTRL-Kits wurden für alle entwickelt, die die Interaktion zwischen Mensch und Maschine und deren Art neu interpretieren möchtenwir kontrollieren und tun Dinge.

Langfristig ebnen wir den Weg für die Akzeptanz nicht-invasiver neuronaler Schnittstellentechnologie durch Massenverbraucher bei allen Mensch-Maschine-Interaktionen, die ein globales Smartphone-Publikum von mehr als einem Menschen ansprechen würden. 3 Milliarden Menschen .

Menschen würden das CTRL-Kit in ihrem täglichen Leben verwenden, um alle Arten von Geräten wie Computer, Telefon und Smart-Geräte zu Hause zu steuern. Es würde weniger intuitive Hardware wie Maus und Tastatur ersetzen und das Tippen, Wischen,Klicken, ziehen, zoomen usw., um Dinge zu steuern und zu tun.

Das obige Video zeigt, wie Handbewegungen können verwendet werden, um in Electric Dots, einem fraktalen Echtzeit-Partikelsystem, farbenfrohe Bilder und Töne zu erzeugen.

Ab wann erwarten Sie, dass es auf dem Verbrauchermarkt erhältlich sein wird?

CTRL-Kit wird ab 2020 im Handel erhältlich sein. Es wird derzeit auch von ausgewählten Entwicklerpartnern in der Vorschau angezeigt, sodass diejenigen, die daran interessiert sind, einen frühen Zugang beantragen können, indem sie sich unserer Warteliste anschließen. hier.

Er konnte jedoch keine endgültigen Antworten auf die Kosten des Produkts geben oder ob es im Handel erhältlich sein wird. Unabhängig vom Preis hätten sie einige sehr willige Kunden, wie aus dem ersten Kommentar im Video unten hervorgeht.

Es zeigt eine CTRL-Kit-Erfahrung, die es einem ermöglicht, „Kraft und Dynamikbereich einzusetzen, um Dinge aus der Ferne zu steuern“. Die virtuelle Umgebung bietet verschiedene Objekte, die auf verschiedene Arten manipuliert werden können. Auf diese Weise kann der Spieler „Handhaltungen erkunden und benutzerdefinierte Ereignisse hinzufügen, um Objekte zu entfernen, wegzuwerfen oder Objekte in die Baugruppe einzufangen.“

Die begeisterte Antwort von mindestens einem Zuschauer auf das Video lautet: " Nimm bitte mein Geld. "