KI kann Hirnströme in Videos übersetzen
Die Kombination aus Magnetresonanztomographie und Stable Diffusion ermöglicht eine erstaunlich akkurate Reproduktion von angesehenen InhaltenZunächst nutzte man einen Datensatz aus öffentlich verfügbaren Videos und dazu gehörenden fMRT-Scans (funktionelle Magnetresonanztomographie). Die fMRT-Scans wurden in Daten übersetzt und in Kombination mit dem Videomaterial dazu verwendet, ein eigenes Modell der Bilder-KI Stable Diffusion zu trainieren.
Bild: mind-video.com
Um das System, das den Namen "MinD-Video" erhielt, zu testen, ließ man es aus dem fMRT-Daten Videos erzeugen. Die Ergebnisse, so zeigt auch das via arXiv als Preprint veröffentlichte Paper, sind durchaus beeindruckend. Die KI-Reproduktionen entsprechen inhaltlich stark den jeweiligen Videos, zeigen also die gleichen Szenen, Bewegungen und Subjekte. Gröbere Abweichungen gibt es vorwiegend bei Details und der Farbgebung. Laut den Wissenschaftlern lag die Genauigkeit der Videos bei der Abbildung des Gesehenen bei 85 Prozent. Ergebnisse zeigt man auch auf einer eigens eingerichteten Website. Der Code für MinD-Video soll bald auf Github veröffentlicht werden.
Mehr dazu findest Du auf derstandard.at
Kurze URL:
Das könnte Dich auch interessieren:
Vor allem im Effektbereich und der Postproduktion kann KI die Filmproduktion revolutionieren – das sieht auch Sony so. Gewerkschaften dürften besorgt sein.
Die neue Hybrid-Technologie kommt in 2 Limousinen zum Einsatz, die weniger als 20.000 Euro kosten.
Ähnliche News:
Hugging Face: Anbieter prominenter KI-Plattform bestätigt Cyberangriff
ARM geht bei neuem Referenzdesign KI-Sonderweg
Samsung Galaxy Watch bekommt neue Funktionen dank KI
Wayback Machine unter Beschuss: Hacker attackieren Internet Archive per DDoS
Opera-Browser bekommt KI-Features
USA erschweren per Gesetz Tracking privater Jets
Apple plant KI-generierte Emojis für iOS 18
Apple wird wohl auf WWDC zahlreiche KI-Funktionen vorstellen
Richtlinien-Änderung: Metas KI-Bots dürften bald nach Österreich kommen
Google will bizarre KI-Antworten in der Suche eliminieren
ARM geht bei neuem Referenzdesign KI-Sonderweg
Samsung Galaxy Watch bekommt neue Funktionen dank KI
Wayback Machine unter Beschuss: Hacker attackieren Internet Archive per DDoS
Opera-Browser bekommt KI-Features
USA erschweren per Gesetz Tracking privater Jets
Apple plant KI-generierte Emojis für iOS 18
Apple wird wohl auf WWDC zahlreiche KI-Funktionen vorstellen
Richtlinien-Änderung: Metas KI-Bots dürften bald nach Österreich kommen
Google will bizarre KI-Antworten in der Suche eliminieren
Weitere News:
Darknet-Rechenzentrum: Cyberbunker soll an Meistbietenden verkauft werden
Sony will KI für "effizientere" Filmproduktion verwenden
2.000 gestohlene Handhelds tauchen vor Restaurant wieder auf
Hugging Face: Anbieter prominenter KI-Plattform bestätigt Cyberangriff
Nicht nur Ticketmaster: Datenlecks bei mehreren Kunden des gleichen Cloudanbieters
Privater Flug um den Mond mit Starship findet nicht statt
Car Thing verursacht Spotify hohe Kosten
Youtube demonetarisiert Video wegen Waschmaschinenmelodie
Google präsentiert neue Funktionen für Android
Datenschutz-Regelung für Medien passierte Justizausschuss
Sony will KI für "effizientere" Filmproduktion verwenden
2.000 gestohlene Handhelds tauchen vor Restaurant wieder auf
Hugging Face: Anbieter prominenter KI-Plattform bestätigt Cyberangriff
Nicht nur Ticketmaster: Datenlecks bei mehreren Kunden des gleichen Cloudanbieters
Privater Flug um den Mond mit Starship findet nicht statt
Car Thing verursacht Spotify hohe Kosten
Youtube demonetarisiert Video wegen Waschmaschinenmelodie
Google präsentiert neue Funktionen für Android
Datenschutz-Regelung für Medien passierte Justizausschuss
Einen Kommentar schreiben
Kommentare
Bitte bleibe sachlich und fair in deinen Äußerungen. Sollte dein Kommentar nicht sofort erscheinen, ist er in der Warteschlange gelandet und wird meist zeitnah freigeschaltet.
(0)
Bitte bleibe sachlich und fair in deinen Äußerungen. Sollte dein Kommentar nicht sofort erscheinen, ist er in der Warteschlange gelandet und wird meist zeitnah freigeschaltet.
Kommentare:
Du hast bereits für diesen
Kommentar angestimmt...
;-)
© by Ress Design Group, 2001 - 2024