Забравете текст към изображение; този AI прави видеоклипове от вашите подкани

Вероятно сте чували за невероятни резултати, реализирани от AI от текст към изображение, като Dall-E, стабилна дифузия и По средата на пътуването. Както може би сте очаквали, революцията върви напред, като следващата цел са инструментите за изкуствен интелект за текст във видео.

QuickVid генерира този видеоклип за DJI Drone и астронавтите на Марс.

Google и Meta дразнят възможностите си за текст към видео в изследователски доклади от техните AI лаборатории, но тази напреднала технология не е била достъпна за обществеността. Ако сте очаквали с нетърпение шанса да опитате да създадете цели видеоклипове с проста подкана с AI, сега е вашият шанс, благодарение на QuickVid.

Препоръчани видеоклипове

Преди очакванията ви да се покачат твърде високо, важно е да осъзнаете, че това не е еквивалентно на генериране на хиляди снимки със стабилна дифузия и сглобяването им за създаване на видео или получаване на достъп до най-модерните AI системи в света за истинско видео генериране. Това е много ранно влизане в надпреварата за решение за текст към видео.

Свързани

  • 5 неща, с които AI генераторите на изображения все още се борят
  • Най-добрите AI генератори на изображения за създаване на изкуство от текст
  • Новите AI инструменти на Canva може да заменят вашия видеоредактор

Първата стъпка от процеса за AI е генерирането на скрипт въз основа на вашата подкана. Тествах системата, като създадох кратък видеоклип в YouTube от тези думи: „Видео на дрон на DJI, летящ над астронавт на Марс, завършващо с реакция на изненадания астронавт.“

AI написа пълен разказ от 79 думи от моята подкана, след което синтезира речта с избор на мъжки или женски глас. TechCrunch посочи, че фоновото видео, избрано за генерираното видео, е взето от фондова библиотека и очевидно е имало много кадри на „астронавти на Марс“.

Като съмнителен завършек, QuickVid наслагва скрипта като заглавия и добавя миниатюрни изображения, генерирани от Dall-E API. Полученият видеоклип в YouTube, видян по-горе, е … интересен. Може би ще се справи по-добре с по-земни видеоклипове.

В интервю за TechCrunch разработчикът на QuickVid каза, че предстоят подобрения, като повече опции за персонализиране пристигат през януари. В крайна сметка QuickVid ще включва и надписи и поддържащи аватари.

През следващата година може да се появят още много решения за текст към видео, заедно с други визуални чудеса като AR очила и по-модерни VR слушалки. Трябва да е вълнуващо.

Препоръки на редакторите

  • Това са 10-те най-гледани видеоклипа в YouTube за всички времена
  • Новото приложение Designer на Microsoft прави генеративния AI изключително прост
  • Пристигнаха видеоклипове, генерирани от AI, и се развиват бързо
  • Bing Image Creator пренася изображения, генерирани от DALL-E AI, във вашия браузър
  • Забравете Dall-E, можете да се регистрирате, за да създавате видеоклипове, генерирани от AI сега

Надградете начина си на животDigital Trends помага на читателите да следят забързания свят на технологиите с всички най-нови новини, забавни ревюта на продукти, проницателни редакционни статии и единствени по рода си кратки погледи.