{"id":226446,"date":"2024-01-25T09:34:03","date_gmt":"2024-01-25T08:34:03","guid":{"rendered":"https:\/\/www.ifun.de\/?p=226446"},"modified":"2024-01-25T09:36:42","modified_gmt":"2024-01-25T08:36:42","slug":"ki-videogenerator-lumiere-google-beeindruckt-mit-neuem-ansatz","status":"publish","type":"post","link":"https:\/\/www.ifun.de\/ki-videogenerator-lumiere-google-beeindruckt-mit-neuem-ansatz-226446\/","title":{"rendered":"KI-Videogenerator Lumiere: Google beeindruckt mit neuem Ansatz"},"content":{"rendered":"<p>Forschende der Tel-Aviv University und der Research-Abteilung von <a href=\"https:\/\/ai.google\/\">GoogleAI<\/a> haben unter dem Namen <a href=\"https:\/\/lumiere-video.github.io\/#\">Lumiere ein neues KI-Modell<\/a> vorgestellt, das auf Basis einfacher Texteingaben in der Lage ist, Videos mit realistischen, vielf\u00e4ltigen und koh\u00e4renten Bewegungen zu erzeugen.<\/p>\n<p><a href=\"https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/Lumiere.gif\"><img decoding=\"async\" class=\"aligncenter size-full wp-image-226447\" src=\"https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/Lumiere.gif\" alt=\"Lumiere\" width=\"500\" \/><\/a><\/p>\n<p>Bevor eure Augen jetzt zum n\u00e4chsten Absatz wandern, empfehlen wir euch einmal, durch die seit wenigen Stunden aktive <a href=\"https:\/\/lumiere-video.github.io\/#\">Lumiere-Webseite<\/a> zu scrollen, die dort sichtbaren Ergebnisse sind beeindruckend.<\/p>\n<h2>Ganzes Video statt Einzelbilder<\/h2>\n<p>Wichtigstes Merkmal des neuen Ansatzes, der Googles Lumiere-Projekt von anderen Implementierungen im gleichen Feld unterscheidet: Statt lediglich Schl\u00fcsselbilder mit festen, zeitlichen Abst\u00e4nden zu erstellen, die anschlie\u00dfend mit synthetisch generierten Videoinhalten verbunden werden, erzeugt Lumiere das gesamte Video auf einmal und liefert so deutlich hochwertigere Ergebnisse.<\/p>\n<p>Der neue Ansatz soll die Erstellung eines konsistenteren Videomaterials erm\u00f6glichen, besitzt ein besseres Zeitverst\u00e4ndnis als andere Projekte und liefert nach Angaben der Mitwirkenden nicht nur bei der Text-zu-Video-Generierung branchenf\u00fchrende Ergebnisse, sondern kann auch zur Videobearbeitung eingesetzt werden.<\/p>\n<p><a href=\"https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/viseo-stile-2000.jpg\"><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter size-large wp-image-226448\" src=\"https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/viseo-stile-2000-700x571.jpg\" alt=\"Viseo Stile 2000\" width=\"700\" height=\"571\" srcset=\"https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/viseo-stile-2000-700x571.jpg 700w, https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/viseo-stile-2000-500x408.jpg 500w, https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/viseo-stile-2000-768x626.jpg 768w, https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/viseo-stile-2000-1536x1252.jpg 1536w, https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/viseo-stile-2000.jpg 2000w\" sizes=\"auto, (max-width: 700px) 100vw, 700px\" \/><\/a><\/p>\n<h2>Auch Bearbeitung m\u00f6glich<\/h2>\n<p>Mit Lumiere sind Bild-zu-Video-Transformationen, das so genannte Video-Inpainting und die Generierung bestimmter Video-Stile m\u00f6glich.<\/p>\n<p>Wer sich f\u00fcr die Hintergr\u00fcnde von Lumiere interessiert, kann das zugeh\u00f6rige Paper ab sofort <a href=\"https:\/\/arxiv.org\/abs\/2401.12945\">aus dem Netz laden<\/a>. \u00dcberschrieben mit &#8222;Lumiere: A Space-Time Diffusion Model for Video Generation&#8220; geht das 18 Seiten lange Dokument auf F\u00e4higkeiten und Hintergr\u00fcnde des neuen Modells ein und vergleicht die Lumiere-Ergebnisse mit \u00e4hnlichen KI-Projekten wie AnimateDiff, Gen2, ImagenVideo, Pika und ZeroScope.<\/p>\n<ul>\n<li><strong>PDF-Download<\/strong>: <a href=\"https:\/\/arxiv.org\/pdf\/2401.12945.pdf\">Lumiere Research Paper<\/a><\/li>\n<\/ul>\n<p><div class=\"responsive-video\"><iframe loading=\"lazy\" title=\"Lumiere\" width=\"500\" height=\"281\" src=\"https:\/\/www.youtube-nocookie.com\/embed\/wxLr02Dz2Sc?feature=oembed\" frameborder=\"0\" allow=\"accelerometer; autoplay; clipboard-write; encrypted-media; gyroscope; picture-in-picture; web-share\" referrerpolicy=\"strict-origin-when-cross-origin\" allowfullscreen><\/iframe><\/div><\/p>\n<p><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/vg05.met.vgwort.de\/na\/e7caddfdf98c411b811087c69cb34136\" width=\"1\" height=\"1\" no-lazy class=\"tracking\"><\/p>\n","protected":false},"excerpt":{"rendered":"<a href=\"https:\/\/www.ifun.de\/ki-videogenerator-lumiere-google-beeindruckt-mit-neuem-ansatz-226446\/\"><img width=\"150\" height=\"150\" src=\"https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/lumiere-google-150x150.jpg\" class=\"alignright tfe wp-post-image\" alt=\"Lumiere Google\" decoding=\"async\" loading=\"lazy\" \/><\/a><p>Forschende der Tel-Aviv University und der Research-Abteilung von GoogleAI haben unter dem Namen Lumiere ein neues KI-Modell vorgestellt, das auf Basis einfacher Texteingaben in der Lage ist, Videos mit realistischen, vielf\u00e4ltigen und koh\u00e4renten Bewegungen zu erzeugen. Bevor eure Augen jetzt zum n\u00e4chsten Absatz wandern, empfehlen wir euch einmal, durch die seit wenigen Stunden aktive Lumiere-Webseite [&hellip;]<\/p>\n","protected":false},"author":1,"featured_media":226449,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_acf_changed":false,"footnotes":""},"categories":[1],"tags":[82,3536,6065,31],"class_list":["post-226446","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-news","tag-google","tag-ki","tag-kuenstliche-intelligenz","tag-video"],"acf":[],"aioseo_notices":[],"featured_image":["https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/lumiere-google-feature.jpg"],"subheadline":["Realistic Video Generation"],"rest_api_enabler":{"featured_image":"https:\/\/images.ifun.de\/wp-content\/uploads\/2024\/01\/lumiere-google-feature.jpg","subheadline":"Realistic Video Generation"},"_links":{"self":[{"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/posts\/226446","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/comments?post=226446"}],"version-history":[{"count":2,"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/posts\/226446\/revisions"}],"predecessor-version":[{"id":226454,"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/posts\/226446\/revisions\/226454"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/media\/226449"}],"wp:attachment":[{"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/media?parent=226446"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/categories?post=226446"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.ifun.de\/apiv2\/wp\/v2\/tags?post=226446"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}