„Leuchtende Quallen steigen langsam aus dem Meer auf“, geben Sie in Morph Studio weiter ein, was Sie sehen möchten, „und verwandeln sich in funkelnde Sternbilder am Nachthimmel.“
Nach ein paar Minuten generiert Morph Studio ein kurzes Video. Eine Qualle ist völlig transparent und funkelnd, dreht sich und steigt auf, ihre schwankende Gestalt bildet einen Kontrast zu den Sternen am Nachthimmel.
Leuchtende Quallen steigen aus einem bezaubernden Meer auf und verwandeln sich in glitzernde Sterne am dunklen Himmel.
Betreten Sie „Joker Cinematic“, und das Gesicht, das einst die Welt eroberte, ist zurück.
Joaquin Phoenix liefert eine hyperrealistische Darstellung als Joker in der filmischen Szene ab, die in den neonbeleuchteten Straßen von New York spielt und Rauch umgibt, der die Atmosphäre des Chaos und der Dunkelheit verstärkt.
Vor kurzem Das Startup Morph Studio hat seine Technologie und Community zur Text-zu-Video-Generierung umfassend aktualisiert. Ihr Modell wurde einer umfassenden Aktualisierung unterzogen, und diese Videoproduktionen zeigen das aktualisierte Modell mit klaren Bildern und lebendigen Details.
Morph Studio ist das erste Team der Welt, das Text-zu-Video-Produkte öffentlich auf den Markt bringt, damit die Öffentlichkeit sie nach Belieben testen kann, bevor Runway die öffentliche Betaversion von Gen2 startete.
Im Vergleich zu anderen beliebten Text-zu-Video-Produkten unterscheidet sich Morph Studio in Bezug auf kostenlose Dienste. Es bietet eine Standardauflösung von 1080P und eine maximale Aufbauzeit von 7 Sekunden vom Start an. Für Text-zu-Video-Produkte sind eine höhere Auflösung, eine längere Generierungszeit und eine bessere Absichtsäußerung drei Schlüsselindikatoren. Bei diesen drei Indikatoren hat Morph das neueste Niveau der Branche erreicht.
Die durchschnittliche Länge einer einzelnen Aufnahme eines Hollywood-Films beträgt 6 Sekunden. Durch die Verlängerung der Generierungszeit auf 7 Sekunden können mehr Benutzer auf ihre kreativen Bedürfnisse eingehen.
Das Erleben der Modelle von Morph Studio ist ganz einfach. Sie können sie kostenlos nutzen, indem Sie sich bei Discord registrieren.
Das Modell mit dem Wort „Pro“ im roten Feld auf dem Bildschirm ist das aktualisierte Modell und Gegenstand der Erfahrung dieses Artikels.
Kamerabewegung ist die Grundsprache der Videoproduktion und ein wirkungsvolles Erzählmittel. Morph bietet mehrere allgemeine Kamerasprachen, darunter Zoom, Schwenken (nach oben, unten, links, rechts), Drehung (im oder gegen den Uhrzeigersinn) und Standbilder.
Morph bietet auch die MOTION-Funktion (1-10) zur Steuerung der Videobewegung. Je größer der Wert, desto heftiger und übertriebener ist die Aktion. Je kleiner der Wert, desto subtiler und sanfter ist die Aktion.
Die Bildrate (FPS) bietet einen Einstellbereich von 8 bis 30. Je höher der Wert, desto flüssiger das Video und desto größer die Größe. Beispielsweise erzeugt -FPS 30 das flüssigste, aber auch größte Video. Standardmäßig werden alle Videos mit 24 Bildern pro Sekunde erstellt.
Die Standardvideolänge beträgt 3 Sekunden. Um ein 7-Sekunden-Video zu generieren, können Sie -s 7 in den Befehl eingeben. Darüber hinaus bietet das Modell 5 Videoformate zur Auswahl.
Wenn Sie Anforderungen an Details wie Objektiv, Bildrate und Videolänge haben, geben Sie bitte nach Eingabe der Inhaltsaufforderung weiterhin die entsprechenden Parameter ein. (Derzeit wird nur die Eingabe auf Englisch unterstützt.)
Wir haben den aktualisierten Modellservice erlebt und den visuellen Schock, den 1080P mit sich bringt, stark gespürt.
Bis vor kurzem hatten Menschen das erste Foto eines Schneeleoparden, der unter den Sternen spaziert:
Das erste Foto eines Schneeleoparden, der unter den Sternen spaziert.
Wir möchten wissen, ob das Modell von Morph Studio Videos dieses relativ seltenen Tieres generieren kann?
Mit der gleichen Aufforderung platzieren wir die Werke von Morph Studio im oberen Teil des Videos und die mit Pika generierten Werke im unteren Teil des Videos.
ein Schneeleopard, der unter einer sternenklaren Nacht läuft, filmisch realistisch, super detailliert, -Bewegung 10, -AR 16:9, -Heranzoomen, -Schwenken nach oben, -FPS 30, -S 7. Negativ: Zusätzliche Gliedmaßen, Fehlende Arme und Beine, verschmolzene Finger und Beine, zusätzliche Finger, entstellen
Der Antwortbogen von Morph Studio bietet ein genaues Textverständnis. Auf dem 1080P-Bild sind die Haare des Schneeleoparden detailreich und lebensecht. Im Hintergrund sind die Milchstraße und Sterne zu sehen. Allerdings ist die Bewegung des Schneeleoparden nicht offensichtlich.
In Pikas Hausaufgabe läuft der Schneeleopard zwar, aber der Nachthimmel scheint als eine Nacht mit schweren Schneeflocken verstanden zu werden. Es gibt immer noch eine Lücke in Bezug auf Snow Leopard-Stil, Details und Bildschärfe.
Schauen wir uns noch einmal den Effekt der Charaktergenerierung an.
Meisterwerk, beste Qualität, ultradetailliertes RAW-Video, 1 Mädchen, Solotanz, digitale Malerei, wunderschönes Cyborg-Mädchen, 21 Jahre, langes, welliges rotes Haar, blaue Augen, zarte, blassweiße Haut, perfekter Körper, der im unheimlichen Licht der Morgendämmerung in einer Postapokalypse singt
Morph In den von Studio erstellten Arbeiten bringt die hohe Auflösung äußerst feine Gesichtskonturen und Mikroausdrücke hervor, und im Morgenlicht sind Haardetails deutlich sichtbar.
Vorbehaltlich mangelnder Auflösung, Farbe und Lichtstärke sind die von Pika erzeugten Bilder insgesamt bläulich und die Gesichtsdetails der Charaktere sind nicht zufriedenstellend.
Menschen und Tiere haben es alle erlebt, werfen wir einen Blick auf die Erzeugungswirkung von Gebäuden (von Menschenhand geschaffenen Objekten).
La torre eifel sternenklare Nacht von Van Gogh, epischer, stilvoller Kunstkomplex, tiefe Farben, fließende fky, sich bewegende Wolken
Verglichen mit Pikas Werk, das eher an Gemälde erinnert, balanciert das Werk von Morph Studio die Van-Gogh-Elemente besser und realistische Elemente. Die Lichtverhältnisse sind sehr reichhaltig, insbesondere die fließenden Details des Wolkenmeeres, und der Himmel in Pikas Werken ist fast statisch.
Abschließend erleben Sie die Schaffung natürlicher Landschaften.
Eines frühen Morgens stieg die Sonne langsam über den Meeresspiegel und die Wellen berührten sanft den Strand.
Sie fragen sich vielleicht, ob es sich bei den Arbeiten von Morph Studio um echte Aufnahmen handelt, die von menschlichen Fotografen unter natürlichen Bedingungen aufgenommen wurden.
Aufgrund des Fehlens feiner Licht- und Schattenebenen erscheinen die Wellen und der Strand in dem von Pika generierten Video flach und die Bewegungen der Wellen, die auf den Strand treffen, sind relativ langweilig.
Zusätzlich zu dem schockierenden Erlebnis, das eine hohe Auflösung mit sich bringt, mit der gleichen Aufforderung zum Generieren von Videos (z. B. Tiere, Gebäude, Menschen und Naturlandschaftsthemen), werden Gegner bei bestimmten Generierungsaufgaben mehr oder weniger „fehlschlagen“ und Morph Studio bietet eine relativ gute Leistung. Es ist stabiler, hat relativ weniger Eckfälle und kann Benutzerabsichten genauer vorhersagen.
Das Verständnis dieses Startups für Vincent Video ist von Anfang an, dass das Video in der Lage sein muss, Benutzereingaben sehr genau zu beschreiben, und auch alle Optimierungsarbeiten gehen in diese Richtung. Die Modellstruktur von Morph Studio verfügt über ein tieferes Verständnis der Textabsichten. Dieses Update hat einige strukturelle Änderungen vorgenommen und insbesondere detailliertere Anmerkungen für einige Daten vorgenommen.
Neben dem relativ guten Textverständnis wird auch die Detailverarbeitung des Bildes durch die hochauflösende Ausgabe nicht behindert. Tatsächlich war der Aktionsinhalt auf dem Bildschirm nach der Aktualisierung des Modells umfangreicher, was sich auch in den Werken widerspiegelt, die wir mit Morph Studio erstellt haben.
Wenn das „Mädchen mit dem Perlenohrring“ den Kopf bewegt, zittern auch die Ohrringe leicht; die Bilder mit komplexeren Aktionen wie Reiten sind auch flüssiger, zusammenhängender und logischer, und die Ausgabe der Handbewegungen ist auch gut.
1080P bedeutet, dass das Modell mehr Pixel verarbeiten muss, was größere Herausforderungen bei der Detailgenerierung mit sich bringt. Den Ergebnissen nach zu urteilen, kollabiert das Bild jedoch nicht nur nicht, sondern ist aufgrund des hohen Detaillierungsgrades auch ausdrucksstärker .
Dies ist eine Reihe von Naturlandschaften, die wir mithilfe von Modellen erstellt haben, darunter spektakuläre riesige Wellen und Vulkanausbrüche sowie zarte Nahaufnahmen von Blumen.
Eine hochauflösende Ausgabe bietet Benutzern ein besseres visuelles Vergnügen, verlängert aber auch die Ausgabezeit des Modells und beeinträchtigt das Erlebnis.
Morph Studio generiert jetzt 1080p-Videos in dreieinhalb Minuten, was der gleichen Geschwindigkeit wie Pikas 720P-Videos entspricht. Start-up-Unternehmen verfügen nur über begrenzte Rechenressourcen, sodass es für Morph Studio nicht einfach ist, SOTA aufrechtzuerhalten.
Außerdem unterstützen Morph Studio-Modelle in Bezug auf den Videostil neben dem Filmrealismus auch gängige Stile wie Comics und 3D-Animationen.
Morph Studio konzentriert sich auf Text-to-Video-Technologie und gilt als die nächste Stufe des KI-Branchenwettbewerbs.
„Instant-Video könnte den nächsten Sprung in der KI-Technologie darstellen“, sagte die New York Times in der Überschrift eines Technologieberichts und argumentierte, dass es genauso wichtig sein wird wie der Webbrowser und das iPhone.
Im September 2022 hat Metas Ingenieurteam für maschinelles Lernen ein neues System namens Make-A-Video eingeführt. Benutzer geben eine grobe Beschreibung der Szene ein und das System generiert ein entsprechendes kurzes Video.
Im November 2022 veröffentlichten Forscher der Tsinghua-Universität und der Beijing Academy of Artificial Intelligence (BAAI) auch CogVideo.
Damals waren die von diesen Modellen generierten Videos nicht nur unscharf (die von CogVideo generierte Videoauflösung betrug beispielsweise nur 480 x 480), die Bilder waren auch relativ verzerrt und es gab viele technische Einschränkungen. Sie stellen jedoch immer noch eine bedeutende Entwicklung in der Generierung von KI-Inhalten dar.
Oberflächlich betrachtet ist ein Video nur eine Reihe von Einzelbildern (Standbildern), die so zusammengesetzt sind, dass die Illusion von Bewegung entsteht. Allerdings ist es deutlich schwieriger, die zeitliche und räumliche Konsistenz einer Bildserie sicherzustellen.
Das Aufkommen des Diffusionsmodells hat die Entwicklung der Technologie beschleunigt. Forscher haben versucht, das Diffusionsmodell auf andere Bereiche wie Audio, 3D und Video zu übertragen, und die Videosynthesetechnologie hat erhebliche Fortschritte gemacht.
Die auf dem Diffusionsmodell basierende Technologie ermöglicht es dem neuronalen Netzwerk hauptsächlich, einige Muster automatisch zu lernen, indem es umfangreiche Bilder, Videos und Textbeschreibungen aussortiert. Wenn Sie Inhaltsanforderungen eingeben, generiert das neuronale Netzwerk eine Liste aller Merkmale, die seiner Meinung nach zur Erstellung des Bildes verwendet werden könnten (denken Sie an die Umrisse von Katzenohren oder die Kanten eines Telefons).
Dann ist das zweite neuronale Netzwerk (auch als Diffusionsmodell bekannt) dafür verantwortlich, das Bild zu erstellen, die für diese Funktionen erforderlichen Pixel zu generieren und die Pixel in ein kohärentes Bild umzuwandeln.
Durch die Analyse Tausender Videos kann die KI lernen, viele Standbilder auf ähnlich zusammenhängende Weise aneinanderzureihen. Der Schlüssel besteht darin, ein Modell zu trainieren, das die Beziehungen und die Konsistenz zwischen den einzelnen Frames wirklich versteht.
„Dies ist eine der beeindruckendsten Technologien, die wir in den letzten hundert Jahren entwickelt haben“, sagte Runway-CEO Cristóbal Valenzuela einmal den Medien: „Man muss die Leute dazu bringen, sie tatsächlich zu nutzen.“
2023 wird von einigen in der Branche als Durchbruchjahr für die Videosynthese angesehen. Im Januar gab es kein öffentlich verfügbares Text-zu-Video-Modell, und bis zum Jahresende gab es Dutzende ähnlicher Produkte und Millionen von Benutzern.
a16z-Partnerin Justine Moore hat die Zeitleiste von Vincents Videomodell auf sozialen Plattformen geteilt. Daraus können wir ersehen, dass es neben großen Herstellern auch eine sehr hohe Geschwindigkeit bei der Technologieiteration gibt schnell.
Die aktuellen KI-generierten Videos haben kein einheitliches und klares technisches Paradigma ähnlich wie LLM gebildet. Die Branche befindet sich noch in der Erkundungsphase, wie stabile Videos generiert werden können. Die Forscher glauben jedoch, dass diese Mängel behoben werden können, wenn ihr System mit immer mehr Daten trainiert wird. Letztendlich wird diese Technologie das Erstellen von Videos so einfach machen wie das Schreiben von Sätzen.
Ein hochrangiger inländischer Investor der KI-Branche teilte uns mit, dass mehrere der wichtigsten Artikel zur Vincent Video Technology im Juli-August 2022 veröffentlicht wurden. In Analogie zum Industrialisierungsprozess von Vincent Video steht diese Technologie der Transformation der Branche nahe Der Knoten wird ein Jahr später, also Juli-August 2023, erscheinen.
Die gesamte Videotechnologie entwickelt sich sehr schnell und die Technologie wird immer ausgereifter. Dieser Investor sagte, dass er aufgrund früherer Investitionserfahrungen im GAN-Bereich davon ausgeht, dass die Text-to-Video-Technologie ein Produkt sein wird in den nächsten sechs Monaten bis zu einem Jahr.
Das Morph-Team vereint die besten jungen Forscher auf dem Gebiet der Videogenerierung. Nach intensiver Forschung und Entwicklung Tag und Nacht im vergangenen Jahr hat Gründer Xu Huaizhe zusammen mit den Mitbegründern Li Feng, Yin Zixin und Zhao Shihao , Liu Shaoteng und andere wichtige technische Rückgrate haben das Rätsel der KI-Videogenerierung gelöst.
Zusätzlich zum technischen Team hat Morph Studio kürzlich auch sein Produktteam verstärkt, ein Vertragsproduzent von Maoyan Films, ein Juror des Shanghai International Film Festival und ein Kernmitglied des ehemaligen AIGC-Unternehmens in Silicon Valley ist kürzlich ebenfalls Morph Studio beigetreten.
Haising sagte, dass Morph Studio in Bezug auf die technische Forschung eine führende Position in der gesamten Branche einnimmt; das Team sei flach, die Kommunikationseffizienz und die Ausführung seien besonders hoch; Ihr größter Traum war es, einer Animationsfirma beizutreten. Nach dem Aufkommen der KI-Ära wurde ihr schnell klar, dass sich die Animationsbranche in den letzten Jahrzehnten auf 3D-Engines stützen würde und bald eine neue Ära der KI-Engines einläuten würde. Der Pixar der Zukunft wird in einem KI-Unternehmen geboren. Und Morph war ihre Wahl.
Gründer Xu Huaizhe sagte, dass Morph aktiv an der Entwicklung von KI-Videos arbeitet. Wir sind entschlossen, eine Super-App im KI-Video-Zeitalter zu sein und Träume für Benutzer zu verwirklichen.
Der Track wird 2024 seinen eigenen Midjourney-Moment haben, fügte er hinzu.
PS: Um den ursprünglichen Spaß der kostenlosen 1080P-Videogenerierung zu erleben, gehen Sie bitte zu:
https://discord.com/invite/VVqS8QnBkA
Das obige ist der detaillierte Inhalt vonMorph Studio: Kostenlose, 1080P- und 7-Sekunden-starke Dark-Horse-Videobearbeitungssoftware kommt. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!
