Die KI-Videoplattform LTX Studio ist jetzt für Benutzer geöffnet, mit denen sie über eine einfache Texteingabe Kurzfilme, Storyboards und andere generative Produktionen erstellen können.

Ich erhielt frühzeitig Zugang zum Ausprobieren von LTX Studio und konnte innerhalb weniger Minuten eine Idee in einen einminütigen Kurzfilm mit Kommentar, Hintergrundmusik und Soundeffekten umsetzen.

Während alles, was Sie brauchen, um es zum Laufen zu bringen, eine Idee ist, wurde die Plattform von Lightricks-Besitzern so konzipiert, dass sie anpassbar ist, sogar bis hin zur Änderung des Kamerawinkels von Clips.

Es befindet sich noch in der Beta-Phase und es gibt ein paar Fehler, so dass einige Videos überhaupt nicht generiert werden können. Es ist auch nicht so fotorealistisch wie Sora, aber das OpenAI-Videotool wird erst später in diesem Jahr verfügbar sein. Insgesamt ist es eine beeindruckende Leistung, einen Text in eine vollständige Videoproduktion umwandeln zu können.

Wie funktioniert LTX Studio?

Wenn Sie LTX Studio zum ersten Mal öffnen, sehen Sie als Erstes ein einfaches Textfeld, in dem Sie aufgefordert werden, die Filmidee oder eine vollständige Zusammenfassung Ihrer gewünschten Kreation einzugeben. Außerdem finden Sie hier eine Liste weiterer aktueller Projekte und Vorschläge für mögliche Konzepte.

In einer Art Reddit-Schreibaufforderung machte ich den Vorschlag: „In einer ruhigen Vorstadt erweckt die lebhafte Fantasie eines jungen Mädchens ihre Puppen zum Leben und erschafft eine magische Welt, die nur sie sehen kann.“ Und schnell war ich dabei bot einen Charaktererstellungsbildschirm an.

Von hier aus können Sie die visuelle Ästhetik, das Seitenverhältnis, die Inspiration und Ihr virtuelles Casting für eine Auswahl von KI-generierten Charakteren festlegen. Oder wenn Ihnen das, was LTX Studio gemacht hat, nicht gefällt, besorgen Sie sich einen Rewriter.

Im Hintergrund sind Dutzende KI-Modelle im Einsatz, die das Drehbuch erstellen, Sprachkommentare, Hintergrundmusik, Soundeffekte sowie Bild- und Videoelemente hinzufügen.

Sie können es „wie es ist“ akzeptieren, jedes einzelne Element anpassen oder ganz neue Szenen zu Ihrer Produktion hinzufügen. Es ist einfach so, präsentiert wie eine Produktion mit mehreren Einstellungen innerhalb einer Szene, mehreren Szenen in der Produktion und konsistenten Charakteren, die Sie jeder Einstellung zuordnen können.

Produktionen mit LTX Studio erstellen

Im Hintergrund sind Dutzende KI-Modelle im Einsatz, die das Drehbuch erstellen, Sprachkommentare, Hintergrundmusik, Soundeffekte sowie Bild- und Videoelemente hinzufügen.

Ich hatte ungefähr einen Tag Zeit, um mit der LTX Studio-Plattform herumzuspielen, bevor sie allgemein veröffentlicht wurde, aber als sie zum ersten Mal vom CEO von Lightricks, Zeev Farbman, angekündigt wurde, hatte ich sie bereits besichtigt und hatte daher eine gewisse Ahnung, was mich erwarten würde. Die Leistung war besser, als ich es mir von der ersten Version vorgestellt hatte.

Obwohl noch einige Probleme gelöst werden müssen, war der Prozess insgesamt beeindruckend und es handelt sich um einen neuartigen Ansatz, um den Bedarf an längeren KI-Videos zu decken, ohne die Kontrolle über die Konsistenz zwischen Charakteren oder Umgebungen zu verlieren.

Ich habe fast ein Dutzend Videos unterschiedlicher Qualität gemacht, von einem Anime über die Suche nach Geistern im Wald bis zu einem Science-Fiction-Drama über ein seltsames Phänomen, das sich auf einem Raumkreuzfahrtschiff ereignet – aber bei letzterem hatte ich Mühe, die Konsistenz des Kreuzfahrtschiffs zu erreichen.

Meine Lieblingsproduktion hieß „Trails West“ und handelte von einer Gruppe, die während des Goldrauschs auf der Suche nach ihrem Glück nach Kalifornien reiste – nur um dann festzustellen, dass das wahre Glück in ihnen selbst lag.

Dies erforderte nur ein paar Bearbeitungen an den Bildern und das Hinzufügen einiger Soundeffekte an verschiedenen Stellen, um mehr Leben in die Szenen zu bringen.

Eine Lektion, die ich dabei gelernt habe und die ich im nächsten Video über eine empfindungsfähige KI gelöst habe, war die Notwendigkeit von mehr Platz. Dazu gehörte das Hinzufügen ganzer Zwischensequenzen ohne Voice-Over, um den Erzählfluss zu verbessern.

Letzte Gedanken zu LTX Studio

Insgesamt ist dies eine beeindruckende Plattform, die sich mit der Aktualisierung der zugrunde liegenden Modelle durch LTX Studios sicher weiter verbessern wird. Es sind auch so viele Anpassungsmöglichkeiten möglich, dass Sie mit genügend Zeit und Geduld bereits etwas Bemerkenswertes schaffen können.

Es gibt andere KI-Videotools, die möglicherweise realistischere Videos erstellen, Sprachtools mit realistischerer Sprache und wir haben Lippensynchronisation sowohl in Pika Labs als auch in Runway – aber für jedes davon müssen Sie noch eine Reihe kurzer Clips erstellen und Sie haben eine schlechte Charakterkonsistenz.

LTX Studio benötigt Lippensynchronisation und eine detailliertere Kontrolle über den Voiceover. Es gibt einige Generationsfehler, die behoben werden müssen, und es wäre gut, eine Möglichkeit zu haben, eine einzelne Einstellung länger festzuhalten – im Moment fühlt es sich sehr nervös und gehetzt an.

Aber das sind im Gesamtbild nur winzige Probleme, wenn man bedenkt, wie vorteilhaft es ist, an einem einzigen Ort ein Video mit mehreren Aufnahmen, Audioinhalten und einheitlichen Charakteren in jeder Szene zu erstellen.

• OpenAI Sora zum ersten Mal an Filmemacher vergeben – hier sind 7 der besten Videos, die sie erstellt haben
• Ich erhielt Zugriff auf das neue KI-Videotool von Pika Labs und konnte die Qualität der damit produzierten Videos nicht glauben
• Runway vs. Pika Labs – welches ist das beste KI-Videotool?

The post Ich habe frühzeitig Zugriff auf LTX Studio erhalten, um KI-Kurzfilme zu erstellen – hier sind die Ergebnisse appeared first on Jugo Mobile.

LTX Studio ist eine neue generative KI-Videoplattform, die es Entwicklern ermöglicht, eine komplette Produktion aus einer einzigen Eingabeaufforderung heraus zu erstellen. Während einer Demo des Tools sah ich, wie in Sekundenschnelle eine vollständige Produktion mit Clips, Sounds und Charakteren erschien.

Generative KI-Videos haben sich in weniger als einem Jahr schnell von kaum sichtbaren Kurzclips zu nahezu produktionsreifen entwickelt. Wir haben Aufnahmen, die so nah an der Realität sind, dass es schwer ist, Fakten von Fiktion zu unterscheiden, aber größtenteils sind es immer noch kurze Aufnahmen von drei oder vier Sekunden ohne Ton.

Während es eine Vielzahl von Generierungstools und neue Modelle von OpenAI wie Sora gibt, die den Markt verändern werden, konzentrieren sich die Entwickler von LTX Studio auf die Produktion – das Gesamtbild und nicht nur einen Clip.

Entwickelt von Lightricks, dem Team hinter den Facetune- und Photoleap-Apps, nutzt es eine Reihe privater, interner und quelloffener generativer KI-Modelle, um die KI-Videoproduktion zu vereinfachen, und soweit ich gesehen habe, ist es ein bahnbrechender Moment für KI .

Wie funktioniert LTX Studio?

LTX Studio ist eine generative Content-Plattform. Es ermöglicht Ihnen, aus einer Textaufforderung heraus kurze Videoclips, Musik, Soundeffekte und sogar Dialoge zu erstellen. Das Besondere daran ist die Tatsache, dass Sie all dies über eine einzige Benutzeroberfläche erledigen können.

Das Team nutzt eine Reihe generativer KI-Tools und -Modelle und integriert sie dann über die Benutzeroberfläche, um die Erstellung von KI-Videos mit mehreren Aufnahmen zu vereinfachen.

Beginnend mit einer Aufforderung wie „Machen Sie ein Drama über ein Paar, das nach einem Flugzeugabsturz am Strand gestrandet ist“, werden Charakterprofile mit Foto, Stil, Name und Stimme erstellt.

Sobald die Profile vorliegen, erstellt es eine Reihe von Szenen. Jede Szene enthält eine Reihe von 3–4 Sekunden langen Aufnahmen, die aus generativen Videos erstellt wurden. Anschließend können Sie jede Komponente anpassen.

Wie gut funktioniert LTX Studio?

Im Rahmen meiner Arbeit erstelle ich regelmäßig KI-Inhalte. Dazu gehört die Erstellung von Musikvideos, Werbespots und Trailern, um die Funktionsweise verschiedener Modelle und Tools zu demonstrieren. Dies umfasst in der Regel die Nachbearbeitung in herkömmlichen Apps wie Adobe Premiere.

Während einer Demo von LTX Studio mit Zeev Farbman, CEO von Lightricks, nahm er die Grundidee hinter einem meiner Musikvideos auf und hatte in wenigen Worten Dutzende Aufnahmen, verteilt auf eine Handvoll Szenen, und benutzerdefinierte Charaktere einsatzbereit.

Es war nicht perfekt, die Charaktere brauchten etwas Arbeit, aber die Tatsache, dass aus einer Grundidee in Sekundenschnelle ein vollständiges Storyboard mit generierten Inhalten entstand, war erstaunlich.

Die Tatsache, dass aus einer Grundidee in Sekundenschnelle ein vollständiges Storyboard mit generierten Inhalten entstand, war erstaunlich.

Was es noch spannender macht, ist, dass ich die Charaktere einmal anpassen konnte und sie sich dadurch in jeder Einstellung veränderten.

Ich könnte auch den Stil für eine einzelne Aufnahme oder für die gesamte Produktion ändern – zum Beispiel vom Fotorealismus zum Anime wechseln.

Das bedeutete, dass es nicht nötig war, zurückzugehen und neue einzelne Clips neu zu generieren, sie wieder in Premiere Pro zu laden und von vorne zu beginnen, wie es derzeit der Fall ist.

Farbman erzählte mir, dass es einen großen Markt für die Erstellung von Inhalten in großem Maßstab gebe, aber dass einer der überraschenderen Märkte von Regisseuren stammte, die schnelle Storyboards für Ideen erstellen wollten, die in Pitch-Meetings mit Investoren oder Studios verwendet werden könnten.

Wann wird LTX Studio verfügbar sein?

Das Lightricks-Team entwickelt LTX Studio immer noch und finalisiert einige der Funktionen, darunter eine beeindruckende Soundfunktion zur Steuerung der Kameraposition und -bewegung innerhalb einer Aufnahme.

Diese Funktion wandelt das Standbild effektiv in eine 3D-Szene um, durch die Sie sich bewegen können, um den Winkel und die Bewegung der Kamera zu ändern. Sie können dies für jede Aufnahme in einer Szene tun.

Sie erforschen auch das Potenzial der Lippensynchronisation, gaben jedoch zu, dass „noch keine besonders gut ist“. Im Moment ähneln Dialoge eher einem Voice-Over als in einem Film oder einer Fernsehsendung.

Die Warteliste ist bereits für Personen geöffnet, die früher einsteigen möchten, und der erste öffentliche Zugang wird irgendwann in diesem Monat erwartet. Soweit ich gesehen habe, ist es auch ohne die generative Videokomponente bereits ein nützliches Storyboarding-Tool.

Warum ist das wichtig?

Dies ist nicht das einzige generative KI-Studioprodukt, das mir in letzter Zeit vorgestellt wurde. Einige beginnen mit einer Geschichte, andere mit einem Bild – dies ist eher ein rein generatives Produkt, das mit einer einfachen Eingabeaufforderung beginnt, dann aber eine sehr fein abgestimmte, detaillierte Kontrolle über jedes Element ermöglicht.

Studioprodukte sind der nächste logische Schritt für generative KI. Die Möglichkeit, einen lustigen Videoclip zu erstellen, ist großartig, aber die Möglichkeit, mehrere Clips zu erstellen, Musik, Soundeffekte und Dialoge hinzuzufügen, ist ein bahnbrechender Moment – ​​und bringt uns näher an „Netflix, mach einen Film über Katzen auf dem Mond“.

• Das neue generative KI-Videotool von Pika Labs wurde vorgestellt – und es sieht nach einer großen Sache aus
• Ich erhielt Zugriff auf das neue KI-Videotool von Pika Labs und konnte die Qualität der damit produzierten Videos nicht glauben
• Runway vs. Pika Labs – welches ist das beste KI-Videotool?

The post Lernen Sie LTX Studio kennen – ich habe gerade die Zukunft von KI-Videotools gesehen, die bei der Erstellung von Filmen in voller Länge helfen können appeared first on Jugo Mobile.