Werbung

KI kann jetzt Schultests bestehen, hat aber den Turing-Test immer noch nicht bestanden

Vom Gewinn bei Go bis zum Bestehen der Multiple-Choice-Tests der achten Klasse macht die KI schnelle Fortschritte. Ihre Kreativität lässt jedoch noch zu wünschen übrig.

Am 4. September 2019 hat Peter Clark zusammen mit mehreren anderen Forschern veröffentlicht Von 'F' bis 'A' bei den NY Regents Science Exams: Ein Überblick über das Aristo-Projekt ∗ ” Das im Titel genannte Aristo-Projekt wird für die rasche Verbesserung gefeiert, die es gezeigt hat, als es die Art und Weise testete, wie menschliche Schüler der achten Klasse im Staat New York auf ihre wissenschaftlichen Kenntnisse getestet werden.

Die Forscher kamen zu dem Schluss, dass dies ein wichtiger Meilenstein für AI ist: " Obwohl Aristo nur Multiple-Choice-Fragen ohne Diagramme beantwortet und nur im Bereich der Wissenschaft tätig ist, stellt er dennoch einen wichtigen Meilenstein für Systeme dar, die lesen und verstehen können. Die Dynamik dieser Aufgabe war bemerkenswert, und die Genauigkeit stieg von ungefähr 60% bis über 90% in nur drei Jahren. "

Die Aristo-Projekt basiert auf den finanziellen Ressourcen und der Vision von Paul G. Allen, der Gründer der Allen-Institut für künstliche Intelligenz A12. Wie auf der Website erläutert, gibt es mehrere Teile, um AI in die Lage zu versetzen, einen Multiple-Choice-Test zu bestehen.

Aristos jüngste Löser sind :

  • Die Informationsabruf , PMI und ACME Löser, die mithilfe statistischer Wortkorrelationen in einem großen Korpus nach Antworten suchen. Diese Löser eignen sich für Fragen zum Nachschlagen, bei denen eine Antwort im Text explizit angegeben ist.
  • Die Tupelinferenz , Multee und Qualitatives Denken Löser, die versuchen, Fragen durch Argumentation zu beantworten, wobei zwei oder mehr Beweisstücke kombiniert werden müssen, um eine Antwort abzuleiten.
  • Die AristoBERT und AristoRoBERTa Löser, die die jüngsten BERT-basierten Sprachmodelle auf wissenschaftliche Fragen anwenden. Diese Systeme werden geschult, um relevantes Hintergrundwissen auf die Frage anzuwenden, und verwenden einen kleinen Lehrplan, um ihre Leistung zu verbessern. Ihre hohe Leistung spiegelt die schnellen Fortschritte wider, die von erzielt wurdendas NLP-Feld als Ganzes.

Obwohl Aristos Fortschritt in der Tat beeindruckend ist und es zweifellos acht Schüler gibt, die sich wünschen, sie könnten einen Weg finden, die KI zum Test mitzunehmen, ist sie noch lange nicht in der Lage, einen Turing-Test zu bestehenTatsächlich gab das Allen Institute for Artificial Intelligence zu, dass es seine KI absichtlich auf eine andere Art und Weise testete, als es sich 2016 zur Entwicklung aufmachte.

Die Erklärung wurde in einem Artikel gegeben berechtigt , “ Mit der Allen AI Science Challenge über den Turing-Test hinaus . Zugegeben, dass der Test kein „vollständiger Test der Maschinenintelligenz“ wäre, wurde er dennoch als lohnenswert angesehen, da er „mehrere Fähigkeiten zeigt, die stark mit der Intelligenz verbunden sind - Fähigkeiten, die unsere Maschinen benötigen, um die von uns gewünschten intelligenten Aktivitäten zuverlässig auszuführenvon ihnen in der Zukunft - einschließlich Sprachverständnis, Argumentation und Nutzung von gesundem Menschenverstand. “

Werbung

Es gibt auch die praktische Überlegung, die das Testen mit vorgefertigten Tests so attraktiv macht: „Außerdem sind Prüfungen aus praktischer Sicht zugänglich, messbar, verständlich und überzeugend.“ Denken Sie darüber nach, deshalb einigePädagogen lieben standardisierte Tests, während andere sie dafür kritisieren, dass sie den falschen Eindruck erwecken, dass sie Intelligenz messen, wenn sie nur die Leistung einer ganz bestimmten Art messen können.

Wenn es um kreativere Intelligenz geht, bei der die Antwort nicht einfach zu finden oder gar zu verstehen ist, hat die KI noch einen weiten Weg vor sich. Wir können dies an ihren Versuchen erkennen, ein Skript zu erstellen.

Filme mit KI machen

Benjamin früher bekannt als Jetson ist der selbst gewählte Name des „ersten automatisierten Drehbuchautors der Welt“.Der als Benjamin bekannte Drehbuchautor ist „ein sich selbst verbessernder LSTM RNN [Wiederkehrendes neuronales Netzwerk mit Langzeit-Kurzzeitgedächtnis] Maschinenintelligenz, die auf menschlichen Drehbüchern trainiert wurde.

Werbung

Benjamin hat seine eigenen Facebook-Seite , facebook.com/benjaminthescreenwriter . Benjamin hatte früher auch eine Site unter diesem Namen, aber jetzt teilt er / sie das Guthaben auf einer allgemeineren, www.thereforefilms.com/films-by-benjamin-the-ai mit Links zu allen drei Filmen, die auf von AI erstellten Skripten basieren und innerhalb von nur zwei Tagen erstellt wurden, um sich für die 48-Stunden-Film-Challenge von Sci-Fi London zu qualifizieren.

Benjamins erster Filmausflug war das Drehbuch für “ Sunspring . ”Aber auch das erforderte ein wenig Aufforderung von Ross Goodwin , „Kreativer Technologe, Künstler, Hacker, Datenwissenschaftler“ sowie die Arbeit des Filmemachers Oscar Sharp und drei menschliche Akteure.

Der Film wurde auf YouTube gepostet, und Sie können ihn in seiner Gesamtheit sehen, indem Sie die gesamten 9 Minuten durchstehen. Sehen Sie, ob Sie die von der Schriftsteller Neil Gaiman dessen Tweet auf der Benjamin-Website erscheint : „Sehen Sie sich einen kurzen SF-Film an, der den Turing-Test nicht bestanden hat.“

Werbung

Was unterscheidet den KI-Film von einer menschlichen Schöpfung

Aus menschlicher Sicht macht es weniger als vollkommen Sinn. Die Hauptfigur identifiziert als H erklärt irgendwann: „Es ist eine verdammt verängstigte Sache zu sagen. Nichts wird etwas sein, aber ich war derjenige, der es bekamauf diesem Felsen mit einem Kind und dann habe ich die anderen beiden verlassen. ”

Der Filmproduzent musste auch zeigen, was das Drehbuch in einer physikalisch unmöglichen Regie anzeigte: „Er steht in den Sternen und sitzt auf dem Boden.“ Man kann nicht gleichzeitig an zwei verschiedenen Orten sein und nicht beidesgleichzeitig stehen und sitzen.

Ich habe Goodwin bereits 2016 per E-Mail kontaktiert, um ihn zu bitten, die Funktionsweise des Algorithmus zu erläutern. Er erklärte, dass das von ihm ausgewählte „ein wiederkehrendes neuronales LSTM-Netzwerk auf bestimmte Weise beeinflusst werden kann - beispielsweise durch Auswahl nur der WissenschaftFiktionsmaterialien für den Korpus, die Ausgabe wird ein Science-Fiction-Gefühl haben. “

Werbung

Er erläuterte die Grenzen bei der Erstellung von Text, der sich nicht zur Kontrolle der Story-Struktur eignet, da er ausschließlich auf einem statistischen Modell mit Millionen von Parametern basiert und vorhersagt, welcher Buchstabe immer wieder als nächstes kommt.”

Eine Sache, die Benjamin mit seinen menschlichen Kollegen gemeinsam hat, ist die Fortsetzung. Es gab bisher zwei Folgemaßnahmen zu „Sunspring“.

Wird Benjamin menschliche Schriftsteller arbeitslos machen?

Die Antwort auf diese Frage wird in einem Folgefilm, der sich auf „Sunspring“ bezieht, mit Ja, aber mit einer Art albtraumhaften Wendung angeboten. 2017 erstellte Benjamin ein neues Drehbuch, das die Grundlage für einen anderen Film mit einem anderen Set bildetevon Schauspielern namens "It's No Game", die Sie hier sehen können :

Die schriftlichen Credits umfassen drei Entitäten : Benjamin 2.0, Oscar Sharp Autor von Benjamin 2.0 und Ross Goodwin. Entweder schreibt Benjamin über sich selbst und ist sehr meta, oder einige der Menschen haben sich dafür entschieden, diese Art von selbstreferenzieller Qualität in den Film über menschliche Autoren einzufügenverlieren ihre Jobs, wenn KI übernimmt und Maschinen alles steuern.

Werbung

Zusätzliche Credits, die am Ende des Films erscheinen, sind „BALLETRON“, das auch als „rekursiver kontextfreier Algorithmus, der ein Wörterbuch mit französischer Ballettterminologie und englischen Wörtern verwendet, um Choreografien aus Eingabeinitialen zu generieren“ erklärt wirdhätte die Tanzbewegungen diktiert, die gegen Ende des Films erscheinen.

Die Abschlussrede des Stars David Hasselhoff wird an „THE SOLILOQUIZER“ gewürdigt, was nur als „The Cornell Movie Database“ erklärt wird. Dies würde bedeuten, dass ein weiterer Trainingsdatensatz verwendet wurde, um die Rede zu generieren, die dies nicht tutpasst nicht unbedingt mehr zum narrativen Aufbau als die Tanzbewegungen.

Die grundlegende Erzähllinie für die ersten zwei Drittel des Films ist irgendwie sinnvoll. Sie sehen, dass den Autoren gesagt wird, dass sie ersetzt werden sollen. Außerdem werden die Verschiebungen im Dialogstil kontextualisiert und als Ergebnis von a erklärtbesondere Ausgabe von Shows aus den 1980er Jahren oder Shakespeare-Stücken, mit denen Benjamins Schreiben für diese Fälle trainiert wurde.

Werbung

Es rutscht aber auch ab Nicht-Sequenzer trotz der Tatsache, dass Menschen eindeutig am Schreiben beteiligt sind und das Versagen der Kohärenz korrigieren könnten, das sich aus rein maschinengeneriertem Text ergibt. Es könnte sein, dass Goodwin das ungewöhnliche Gefühl für den Film beibehalten möchte, um zu reflektieren, wo KI ist-generierter Text ist derzeit verfügbar.

Im Jahr 2016 bestand Goodwin jedoch darauf, dass er erwartet, dass die KI eines Tages die gleiche Kohärenz erreichen wird, die in Filmen von Menschen zu finden ist. Der Film von 2017 berührt tatsächlich genau den Punkt, den er in der E-Mail-Korrespondenz angesprochen hat, als diese Personenmüssen darüber nachdenken, wie sie werden “ Verwenden Sie diese Technologie rechtzeitig vor ihrer Ankunft. ”

Ist das dritte Mal der Reiz?

Die Menschen hinter Benjamin haben sicherlich versucht, obwohl der dritte Film, den sie produzierten, "Zone Out", leider nicht die Top 3 wie der zweite Film oder sogar die Top 10 wie der erste Film in derWettbewerb für die Sci-Fi Londons 48-Stunden-Film-Challenge im Jahr 2018. Sie wurde wegen übermäßiger Nutzung des vorhandenen Filmmaterials disqualifiziert.

Sie können es hier ansehen, aber das sind etwas mehr als sechseinhalb Minuten Ihres Lebens, die Sie nicht zurückbekommen werden.

Was diesen Film etwas schmerzhafter macht als die beiden vorherigen, ist die Kombination der mechanisch klingenden Stimmen in Kombination mit Filmmaterial, das nicht ganz den Worten entspricht, und die nicht ganz glaubwürdige Auferlegung von Mundbewegungen, die den Gesichtern der Schauspieler auferlegt werdendie gemeinfreien Filme, Der letzte Mann auf Erden und Das Gehirn, das nicht sterben würde das macht das Filmmaterial aus.

All dies ist auf den Ehrgeiz zurückzuführen, Benjamin nicht nur schreiben zu lassen, sondern auch im Film zu „erscheinen“. Und trotz der Idee, dass eine KI einen Körper annimmt, in dem sie dargestellt wurde Rächer: Das Zeitalter von Ultron Künstliche Intelligenz hat tatsächlich keine physischen Eigenschaften, weder Roboter noch Mensch. Benjamin musste sich also durch Charakterisierungen ersetzen, die bereits im Film festgehalten wurden, wobei die von der KI erzeugten Wörter die ursprünglichen Skripte ersetzten.

Die Ergebnisse sind ziemlich chaotisch. Das Beste, was darüber gesagt werden kann, wie es einer der beliebtesten Kommentare getan hat, ist “ Immer noch bessere Liebesgeschichte als Twilight. ”

Fälschung

Was die Kommentatoren nicht verstanden haben, da die Antwort auf die Frage in den Kommentaren zu Schnurrbärten, die auf den weiblichen Charakteren erscheinen, war, wie der Effekt erzielt wurde. Es ist alles, weil der Schauspieler Thomas Middleditch diente als Vorbild für die Rede aller im Film auftretenden Schauspieler.

Die Funktionsweise wird in diesem Video erklärt :

Wir haben weitaus bessere Ergebnisse bei der Neuerstellung von gesehen junge Prinzessin Leia und Grand Moff Tarkin für den Star Wars-Film 2017 Schurke Eins. Offensichtlich haben die Produzenten des garantierten Blockbusters jedoch viel größere Budgets und viel mehr Zeit, um durch die Kombination von Schauspielern und Technologie, wie im folgenden Video erläutert, solche realistischen Nachbildungen zu erzielen :

Der beeindruckende Effekt, der durch diese massiven Anstrengungen im Star Wars-Film erzielt wurde, zeigt jedoch, dass die Kombination von Maschinen und Menschen in Zukunft kreative Ergebnisse hervorbringen kann, die es wert sind, gesehen zu werden. Sie können Effekte und sogar Gesichter erzeugt haben, solangeSie erinnern sich daran, eine gute Geschichte zu erzählen, die eine interne Logik hat, die den Menschen anspricht.

Folgen Sie uns auf

Bleiben Sie über die neuesten technischen Neuigkeiten auf dem Laufenden

Geben Sie einfach Ihre E-Mail-Adresse ein und wir kümmern uns um den Rest :

Mit Ihrer Anmeldung stimmen Sie unserer zu Nutzungsbedingungen und Datenschutzerklärung . Sie können sich jederzeit abmelden.