Нейросеть NVIDIA научилась конвертировать текст в анимацию [ВИДЕО]

Нейросеть NVIDIA научилась конвертировать текст в анимацию [ВИДЕО]

Компания NVIDIA представила новый навык фирменной нейросети, выпустив ИИ-модель под названием text2video. В отличие от многочисленных генераторов картинок, она умеет создавать короткие анимационные ролики, основываясь как на простых, так и более сложных текстовых описаниях.

Сейчас нейросеть, созданная на базе наработок Stable Diffusion, может генерировать видео с максимальным разрешением 2048x1280 пикселей на скорости 24 fps, а их длительность не превышает четырёх секунд. Известно, что пока количество её параметров невысоко (около 4,1 миллиарда), но результаты работы, опубликованные на сайте проекта, даже в «сыром» виде выглядят впечатляюще.

В компании отмечают, что на сегодня text2video ещё находится на стадии разработки и тестирования, поэтому дата её выхода в публичный доступ пока не названа.

Источник: research.nvidia.com


  • Dima I
    Режиссёры напряглись
    • vitkosh
      А может создавать прон-ролики со звуками удовольствия на основании яркого, сочного и подробного описания заказчика ? :)))
      • joha-21
        vitkosh,
        Мечтать не вредно :(
      • Begem0te
        Лет через 5, по сценарию - готовый фильм, а всех актеров на пенсию )
        • joha-21
          Begem0te,
          Но голоса покупать придется иначе большой брат обидется
        • SexyPython
          Думаю всё будет немного иначе... Игровое кино никуда не денется, но станет реально "воскресить" любого актёра без особых затрат.
          • nikitozykov
            SexyPython,
            Ну как сказать без затрат, сразу появятся правообладатели и начнут клянчить (если это кнч не они сами).
          • DeniStreet
            На самом деле, это по-настоящему огромный шаг в развитии ИИ! Эта разработка решает важнейшую задачу, с которой справляемся мы, но пока не справляется ИИ: задача представить что-то, задача фантазировать. То есть, если раньше ИИ не мог увидеть то, чего нет в Интернете, то теперь ИИ сможет "нафантазировать" себе определённые образы, и на фоне этого, сможет это описать текстом, создать много контента на тему, или поставить перед учёными и философами новый вопрос. То есть, нейросети начинают мыслить, как Циолковский. Это очень и очень круто.
            Ну а ещё, из приятного, это точно скажется на геймдеве, потому что теперь нейросети смогут создавать миры с неведомыми зверушками на основе того, что они видели в своих же фантазиях.
            • Hendalph
              Жесткий индо-инглиш :) Сразу теория большого взрыва вспоминается)
              • Eleman
                Вся оперативка кончилась к хренам как на этом сайте посидел минуту..
                • мирныйXРУСТ
                  Развитие нейросетей идет семимильными шагами. Даже сложно представить что будет через 10 лет
                  • NO_NAME87
                    Я все еще жду пока нейросеть начнет захватывать мир

                    Samsung обновила график развёртывания фирменной прошивки One UI 6.1 с набором ИИ-функций. Вслед за флагманами серии  Galaxy S24 пакет утилит Galaxy AI получат и выпущенные ранее устройства — компания рассказала, когда именно это произойдёт.

                     

                    Компания ZTE выпустила недорогой смартфон Changxing 60 с интересным набором характеристик. Новинка поставляется с Android-интерфейсом под кнопочную звонилку, оснащается неплохим для своей цены объёмом памяти и современным разъёмом USB Type-C, а также поддерживает сети 5G.

                     
                    <div></div><div></div><a href='/2024/05/19/1963973/' target='_blank'><img src='https://4pda.to/s/as6ywue3S4wsjFGg0z2I2iyY7kHEE0EmiXkPLY783uK3Miqm98HafRECC.jpg' title='' /></a><div ><img src='https://4pda.to/s/as6yu42hlyXjD7kQLqbvVMOGid.gif' /></div><div></div><div></div><div></div>

                    По расчётам аналитиков Canalys, после прекращения поддержки Windows 10 в следующем году актуальность потеряют около 240 миллионов ПК, не поддерживающих более новую ОС Microsoft. В качестве альтернативы Google предложила пользователям такого железа перейти на её фирменную ОС, созданную специально для устаревших компьютеров.

                     

                    Аналитический портал Statcounter опубликовал статистику распространённости мобильных и десктопных браузеров по итогам марта 2024 года. На этот раз обошлось без сюрпризов: бессменный лидер всё ещё не спешит сдавать свои позиции.

                     

                    Аналитики IT-маркетплейса Market.CNews составили рейтинг самых популярных российских операционных систем по состоянию на 2024 год. Оценка велась по многочисленным параметрам, включая распространение, универсальность, защищённость, наличие версий для разных устройств и потребителей, системные требования и т. д.

                     

                    За пару месяцев до предполагаемой презентации новых флагманов Samsung в сети появились первые реальные фотографии топового Galaxy S24 Ultra. Судя по всему, устройство будет слегка отличаться от того, что мы видели на ранее опубликованных рендерах.

                     

                    В своём новом патенте компания показала необычную разработку, ориентированную на стандартизацию аккумуляторов для разных видов цифровой техники. Если оно дойдёт до серийного производства, пользователи смогут менять батареи iPhone, iMac и периферии за считаные секунды и даже переставлять из одного устройства в другое.

                     

                    Сотрудники университета Киото продолжают работать над первым в мире лекарством для выращивания зубов. Средство уже успешно протестировали на животных, а теперь исследователи активно готовятся к началу его клинических испытаний, которые стартуют в сентябре текущего года.

                     

                    Разработчики WhatsApp объявили о появлении в мессенджере нескольких нововведений, ориентированных в первую очередь на владельцев и администраторов каналов. Все они призваны разнообразить процесс взаимодействия с подписчиками и сделать его более интересным.

                     

                    Разработчики популярного лончера для Android-смартфонов Lawnchair анонсировали выпуск крупного обновления. Новая 14-я версия пока находится в бете, но уже доступна для скачивания и установки. Одним из главных нововведений стала поддержка старых версий Android.

                     

                    Resizable BAR — это технология, позволяющая процессору обращаться ко всему объёму видеопамяти. Старое железо её не поддерживает, но пользователь GitHub под ником xCuri0 решил это исправить. Он написал и выложил в открытый доступ утилиту ReBarUEFI, которая, по его словам, способна заметно повысить производительность некоторых игр.

                     

                    В честь прихода весны компания Teclast запустила распродажу в своём фирменном магазине на AliExpress. По сниженной цене можно приобрести все товары бренда. Например, стали доступны со скидкой планшеты Teclast T60 и T50 Pro с большими экранами, мощными динамиками и поддержкой 4G LTE. 

                     
                    Конца-края не видать. В Steam начался «Фестиваль бесконечной реиграбельности» Популярное

                    Раньше в Steam устраивали лишь распродажи, но сегодня парады низких цен называют куда красивее — фестивалями. И минувшим вечером Valve запустила очередное мероприятие для любителей закупиться видеоиграми на чёрный день.

                     
                    Хеви-метал в каждый дом. В сеть утёк облик Геральта из четвёртого сезона «Ведьмака» Популярное

                    Предпоследний четвёртый сезон «Ведьмака» от Netflix только начали снимать, однако в сети уже появились фотографии нового обличья Геральта, которого в новом сезоне будет играть Лиам Хемсворт. Доспехам он предпочитает обычную кожанку.

                     
                    Создатель GTA: Vice City раскрыл секрет полиции в игре Популярное

                    В серии GTA одним из узнаваемых элементов является полиция и хаос, который разворачивается в городе с увеличением уровня розыска. Ветеран и бывший разработчик Rockstar решил объяснить, какие связанные с этим механики были спрятаны в легендарной Vice City.

                     

                    HMD Global, владеющая правами на торговую марку Nokia, объявила о планах по развитию собственного бренда смартфонов. По данным инсайдеров, производитель полностью откажется от названия Nokia в своей продукции к 2026 году. Уже сейчас сайт nokia.com/phones перенаправляет пользователей на страницу Human Mobile Devices. А дебют фирменных устройств компании состоится на выставке MWC 2024. Приводим подборку популярных телефонов, которыми запомнилась некогда крупнейшая корпорация на рынке мобильной электроники.

                     
                    Госдума отменила «интернет-рабство», Mir Pay удалили из Google Play. Главное за неделю
                    139
                    30.03.24News

                    Разбираем ключевые события прошедших семи дней. В этом выпуске: свежий закон о свободном доступе провайдеров связи, выселение Mir Pay из Google Play и наглядные причины перехода на iPhone 15.

                     
                    Обзор Xiaomi 14 Ultra: претендент на смартфон года глазами зарубежных СМИ
                    61
                    7.03.24News

                    Xiaomi 14 Ultra не назовёшь революционным устройством, но компания проделала немалую работу по устранению недостатков предыдущей модели. В результате многие издания и блогеры уже называют новинку одним из лучших смартфонов года.

                     

                    Недавно представленный Samsung Galaxy A55 получил не так много отличий от предшественника, но одним из них стал новый процессор Exynos 1480 с графическим чипом Xclipse 530 на базе архитектуры AMD RDNA2. В сети уже появились игровые тесты этого аппарата.

                     
                    Космический аппарат заснял Солнце «вплотную» [ВИДЕО] Популярное

                    Европейское космическое агентство представило видео поверхности Солнца, снятое с помощью космического спутника Solar Orbiter. Аппарат приблизился на короткое расстояние к звезде, благодаря чему астрономам удалось рассмотреть поверхность Солнца практически вплотную — насколько это возможно.

                     

                    Разработчик технологий для борьбы с киберпреступлениями F.A.C.C.T. (бывший Group-IB) сообщил изданию РБК, что мошенники придумали новый опасный метод кражи паролей для онлайн-банков, и рассказал, как от него защититься.

                     

                    Команда разработчиков Microsoft рассказала о важном изменении, которое избавляет популярнейший офисный редактор от раздражающей функции. Речь идёт об одном из параметров вставки по умолчанию в Word для Windows.

                     

                    Аналитики медиакомпании Visual Capitalist составили список из 15 бестселлеров мобильного рынка за всю его многолетнюю историю. Рейтинг оказался любопытным: его практически поровну поделили всего два бренда, из которых на плаву к 2024 году остался только один.

                     

                    «Лаборатория Касперского» рассказала РБК о 15-кратном росте количества хакерских атак вида FakeBoss. С их помощью злоумышленники крадут деньги или ценные сведения у специалистов через Telegram, притворяясь их же работодателями.

                     

                    На YouTube-канале Techno Arena появился видеоролик, в котором наглядно сравниваются возможно съёмки двух смартфонов: флагманского Samsung Galaxy S23 FE и недорогого Galaxy A55. Автор видео отдельно оценил работу каждого датчика камеры в формате фото- и видеосъёмки в различных условиях освещения.

                     
                    Названы устройства OnePlus, который получат Android 15 Популярное

                    Компания OnePlus поделилась списком устройств, которые получат доступ к новой версии фирменной прошивки OxygenOS 15, основанной на предстоящей операционной системе Android 15. В список вошло чуть более десяти аппаратов, выпущенных за последние несколько лет.

                     

                    Портал Android Authority обнаружил в коде бета-версии Android 15 любопытную функцию, которая пока не была анонсирована Google. Она позволит улучшить автономность смартфона за счёт нового алгоритма работы дисплея, сокращающего время активности последнего.

                     

                    Разработчики альтернативного файлового менеджера Files выпустили новую версию приложения с рядом полезных функций и доработок. Они поделились списком изменений и опубликовали ссылки на бесплатное скачивание оригинальной замены стандартного «Проводника».

                     

                    Сериал по мотивам Fallout можно назвать безоговорочно успешным — он не просто «пришёл и ушёл», о нём говорят, его тщательно исследуют в поисках намёков на оригинальные игры и различных «пасхалок» от съёмочной группы. На днях, к примеру, фанаты заметили на вид рабочий номер телефона и решили его проверить.

                     

                    Известная своими защищёнными устройствами компания Oukitel приняла участие в большой весенней распродаже на AliExpress. В честь этого ряд моделей бренда можно приобрести по сниженным ценам. Например, со скидкой доступны планшет RT8 и смартфон WP36 с ёмкими аккумуляторами и повышенной долговечностью.

                     

                    Нидерландская компания Yandex N.V. объявила о продаже бизнеса «Яндекса» консорциуму частных инвесторов. Представители компании рассказали об ожидаемых следствиях реструктуризации и сообщили, кто станет её новым владельцем.

                     

                    BYD представила новый электромобиль Seagull Honor Edition. Он отличается компактностью и предлагается в трёх модификациях с двумя вариантами аккумуляторов. При этом цена базовой версии не превышает 10 000 долларов.

                     

                    Разработчики WhatsApp представили новую функцию мессенджера, призванную улучшить конфиденциальность общения при использовании голосовых сообщений. Теперь они смогут самоуничтожаться после прослушивания, снижая риск утечки личной переписки.

                     

                    Компания объявила о выпуске «премиальной» версии фирменного браузера, распространяемой по модели платной подписки. Она ориентирована на корпоративное использование, и отличается от базовой сборки с приставкой Enterprise расширенным набором функций. В блоге Google появилось подробное описание приложения и данные о новом тарифе.