Создан ИИ-синестет, сублимирующий музыку в зрительные образы [ВИДЕО]

Создан ИИ-синестет, сублимирующий музыку в зрительные образы [ВИДЕО]

Производитель музыкальных синтезаторов Teenage Engineering OP-Z совместно с дизайнерскими студиями Modem и Bureau Cool решили поставить эксперимент с ИИ, генерирующим изображения не из текстовых подсказок, а из мелодий. Таким образом, исследователи вдохновлялись неврологическим состоянием, известным как синестезия.

В аудиовизуальном эксперименте в качестве источника музыки использовался секвенсор Teenage Engineering OP-Z. «Цифровое расширение» Modem and Bureau Cool в режиме реального времени переводило музыкальные данные в текстовые подсказки, описывающие цвета, формы и движения, а затем эти подсказки передавались в Stable Diffusion (инструмент с открытым исходным кодом, аналогичный DALL-E 2 и Midjourney) для создания сюрреалистичных и синестетических анимаций.

По словам соучредителя Modem Баса ван де Поэля, этот инструмент станет новым источником вдохновения для художников, которым не всегда хватает творческой жилки для проведения корреляции между непохожими друг на друга вещами или ощущениями. С другой стороны, в эру стремительно развивающегося ИИ, который рисует и портреты, и калейдоскопы, и изображения, выигрывающие художественные конкурсы, так уж ли нужны будут художникам подсказки, если эта профессия может упраздниться?

Источник: engadget.com


  • Огонь!
  • Обычный дабстеп.
    • mopss,
      только в видео нет ни одного дабстеп трека.
    • nicromonger1991
      Для любителей посублимировать )))
      • Megaherz09
        А чем Визуализеры плохи?
        • Визуализация из виндовс плеера вышла на новый уровень
          • loko_2004
            "источником вдохновения для художников" и не только художников, давно служит всем известные вещества
            • nickloc
              loko_2004,
              У Русских это водка, поэтому все наши изобретения суровые и топорные.
            • xorsik
              Winamp на ХР прекрасно с этим справлялся. Помню персет с танцующей девушкой на острове, прям релакс релаксов. Ну а уж всякие рендомные картинки под музыку, их было до фига. Что они там открыли то?
              • de blackfisk
                когда придумают реально ии, тогда разбудите

                автор, ты тупой
                • ram108
                  de blackfisk,
                  И спала она 1000 лет и 1000 дней ...
                • qvaldes
                  Они винамп что ли открыли?)))
                  • ram108
                    Я так понимаю, что можно любую картинку показывать, лишь бы попасть в ритм? А потом сказать - это ИИ?
                    • ram108
                      Когда появится функция, чтобы можно было минусовать статьи?
                      • filthgrinder78
                        Под пси-транс залипать пойдет)
                        • Nesterov12345
                          Контора синтезаторов придумала плагин винампа милкдроп. Вот это поворот
                          • ilguciems
                            Именно "сублимирующий"? Точно этот глагол?
                            • dimon__004
                              только не говорите им про визуализацию в Windows Media Player 9-11
                              • BackTerrium
                                TE последнее время занимается только самопиаром и выпуском дорогих игрушек
                                • Labor Day
                                  Windows media player такой: о найс теперь и это поколение будет втыкать в непонятную дичь под музыку

                                  Американский стартап Mecha Systems Inc показал на выставке CES 2025 карманный компьютер Mecha Comet, ориентированный на энтузиастов. Новинка с модульной конструкцией позволяет лёгким движением руки превращать портативный ПК в игровую консоль или инструмент разработчика с широким набором разъёмов.

                                   

                                  Японская компания Sanyo Trading организовала у себя на родине выставку китайских электромобилей, где представлено более десятка моделей в разобранном виде. Благодаря этому специалистам Страны восходящего солнца удалось понять секрет дешевизны машин из Поднебесной.

                                   
                                  <div></div><div></div><div></div><a href='/2025/02/09/2852862/' target='_blank'><img src='https://i.4pda.ws/s/as6ywue3S4wsjFGg0z2I2iyY7kHEE0EmiXkPLY783uK3Miqm98HafRECC.jpg' title='' /></a><div ><img src='https://4pda.to/s/as6yu42hlyXjD7kQLqbvVMOGid.gif' /></div><div></div>

                                  Незадолго до ожидаемой премьеры смартфон POCO X7 прошёл неофициальное тестирование в Geekbench. Помимо оценки производительности, протокол испытаний, как водится, включает часть ключевых спецификаций устройства — модель процессора и объём оперативной памяти.

                                   

                                  Финский университет Аалто организовал мероприятие Nokia Design Archive, посвящённое самым оригинальным продуктам некогда культового бренда. Экспонатами стали не только серийные, но и концептуальные устройства, которые так и не добрались до полок магазинов.

                                   

                                  Эксперты по кибербезопасности рассказали «Известиям», что злоумышленники могут пользоваться маркетплейсами для распространения вирусов. Например, недорогой ноутбук может быть заражён вредоносом, который майнит криптовалюту для своего «продавца».

                                   

                                  После нескольких месяцев тестирования Google начала рассылать пользователям обновление фирменной клавиатуры Gboard с переработанной темой Dynamic Color. Компания решила сделать дизайн чуть более сдержанным за счёт отказа от ярких цветов.

                                   

                                  Часть пользователей Windows 11 столкнулась с необычной проблемой: их компьютеры неожиданно начали «выкручивать» громкость звука на 100%. В Microsoft уже признали наличие неполадки и рассказали, из-за чего она возникает.

                                   

                                  Технологии продолжают упрощать нашу жизнь, и новый ультразвуковой беспроводной резак Hanboost C1 — яркое тому подтверждение. Уникальный инструмент представлен в форме компактной ручки и может упростить работу дизайнерам, скульпторам, мастерам 3D-печати, любителям моделирования и много кому ещё.

                                   

                                  Россияне смирились с тем, что Discord в стране оказался заблокирован, однако представители сервиса обещали изучить проблему и найти пути её решения. Нашли, решили, но всё это скорее напоминает странную шутку.

                                   

                                  Команда механиков «Гараж 54» реализовала необычный проект, собрав автомобильный двигатель, в основу которого легли 16 двухтактных бензопил фирмы Hüter Technik. Всю эту конструкцию они поместили под капот старого автомобиля Lada.

                                   

                                  Владелец Tesla Cybertruck из Сиэтла, штат Вашингтон, Ник столкнулся с неприятной неожиданностью после того, как он прикрепил к своему электропикапу магнит. Спустя некоторое время на корпусе электрокара появились первые признаки коррозии.

                                   

                                  Фитнес-браслеты и умные часы бренда выделяются высоким качеством сборки, набором функций и дизайном. Новая модель Honor Watch 5 не стала исключением — классический дизайн умных часов дополнен наличием GPS, поддержкой звонков и современным аккумулятором. Но обо всём по порядку.

                                   
                                  Мессенджер WhatsApp наконец избавился от неприятного недостатка Популярное

                                  Одной из любимых функций пользователей WhatsApp стала возможность доступа к одной учётной записи сразу с нескольких устройств. При этом сохраняется вся информация и функциональность, за исключением одного недостатка, который разработчики мессенджера наконец-то исправили.

                                   

                                  AMD поделилась свежими результатами игрового тестирования мобильного процессора Ryzen AI Max+ 395. В качестве соперника для своего чипа с производительным iGPU компания выбрала дискретную видеокарту GeForce RTX 4070 для ноутбуков — и фирменная «встройка» разгромила соперницу.

                                   

                                  Xiaomi объявила об открытии предзаказов на фирменную рацию Sports Walkie-Talkie. Новинка в компактном корпусе ориентирована на любителей активного отдыха и предлагает набор полезных функций в сочетании с надёжной работой для стабильной связи в большинстве условий.

                                   
                                  Xiaomi «отправила на пенсию» ещё девять смартфонов Redmi и POCO Популярное

                                  Компания Xiaomi в очередной раз обновила официальный список End-of-Support (EOS): в него попадают смартфоны, поддержка которых завершена. На этот раз его пополнили девять некогда популярных устройств брендов Redmi и POCO.

                                   

                                  Новейшее железо, внушительный аккумулятор, быстрая зарядка, яркий дисплей и софт с AI-функциями — всё это есть в новом флагмане. Мы протестировали производительность, автономность и камеру realme GT 7 Pro. Делимся впечатлениями в подробном обзоре.

                                   
                                  DeepSeek выпустила мощную нейросеть Janus Pro для генерации изображений Популярное

                                  Китайская компания DeepSeek выпустила семейство мультимодальных моделей искусственного интеллекта Janus Pro. По заявлению разработчиков, новые ИИ-алгоритмы способны генерировать и анализировать изображения лучше, чем OpenAI DALL-E 3 и Stable Diffusion.

                                   

                                  На сайте Microsoft появилось руководство под названием «Как удалить Microsoft Edge», но на самом деле информации об удалении там нет. Компания называет преимущества браузера перед Google Chrome и всеми силами пытается уговорить читателя не удалять Edge.

                                   
                                  Вышла стабильная iOS 18.3. Что нового в прошивке? Популярное

                                  Компания Apple выпустила финальный билд операционной системы iOS 18.3 для всех поддерживаемых моделей iPhone. В новой версии прошивки компания расширила набор интеллектуальных функций Apple Intelligence и внесла изменения в интерфейс некоторых штатных приложений, а также исправила известные ошибки.

                                   

                                  Мужчина по фамилии Ма из восточного Китая включил в своём гараже прямую трансляцию местного шоу, чем привлёк внимание местной полиции. Дело оказалось не в методике просмотра: предприимчивый энтузиаст использовал сразу 400 смартфонов, чтобы сжульничать при розыгрыше ценных призов.

                                   
                                  Galaxy AI обновился и появился на ещё нескольких гаджетах Samsung
                                  24
                                  29.10.24News

                                  Набор ИИ-функций Samsung Galaxy AI дебютировал вместе с флагманской серией смартфонов S24 и недавно обновился — вместе с выходом изящных раскладушек Z Fold6 и Flip6. 9 сентября новинкой в составе One UI 6.1.1 снабдили ещё несколько моделей компании. Разбираемся, какие это устройства и что умеет Galaxy AI после апдейта.

                                   

                                  Издание ТАСС опубликовало отчёт аналитической компании MediaScope, посвящённый аудитории мессенджеров в России. Как оказалось, при всей своей популярности Telegram пока нельзя назвать «народным» сервисом по общему количеству активных пользователей.

                                   

                                  Борьба YouTube за монетизацию, похоже, вышла на новый уровень. Пользователи сервиса начали жаловаться, что кнопка пропуска рекламы стала пропадать с экрана. Это подтвердили и журналисты профильных СМИ — но в ответ на их запрос представитель видеохостинга заявил, что жалобы аудитории сильно преувеличены.

                                   

                                  POCO делает скидку на фирменный планшет POCO Pad. Устройство имеет высокую производительность благодаря процессору Snapdragon 7s Gen 2, а ещё может похвастаться большим экраном с частотой 120 Гц и очень ёмким аккумулятором.

                                   

                                  Вслед за релизом HyperOS 2 в Китае компания Xiaomi начала распространение фирменной прошивки, основанной на Android 15, в других регионах. Обновление улучшает производительность и пользовательский опыт владельцев совместимых гаджетов, а также добавляет новые ИИ-возможности.

                                   
                                  Лучшие смартфоны декабря: игровые Honor GT и realme Neo7, мощный OnePlus Ace 5 Pro и музыкальный vivo Y300
                                  23
                                  27.12.24News

                                  Хотя многие важные анонсы уже отгремели или припасены на начало следующего года, под занавес 2024-го мы не остались без новинок. Их немного, но внимания они заслуживают. Honor показала субфлагманскую 300-ю серию и недорогой игровой смартфон новой линейки GT. Конкуренцию ему составил realme Neo7. Также вышел OnePlus Ace 5 Pro, который производитель называет лучшим игровым аппаратом. А компания vivo решила сделать первый за долгое время музыкальный телефон. Рассказываем о новинках подробнее.

                                   

                                  В социальных сетях и на форуме появилось множество сообщений, что свежее обновление прошивки для старых флагманов линеек Galaxy S10 и Galaxy Note10 привело к их поломке. После установки апдейта пользоваться устройствами становится попросту невозможно.

                                   

                                  Согласно отчёту TrendForce, в этом году наблюдается стремительный рост рынка светодиодных экранов для кинотеатров. В основном это заслуга китайских компаний, которые поставляют свою продукцию не только на местный рынок, но и по всему миру. Это побуждает кинотеатры отказываться от традиционных проекторов.

                                   

                                  За две недели до ожидаемой премьеры серии смартфонов Samsung Galaxy S25 в сети появились результаты тестирования модификации Galaxy S25 Slim в Geekbench. Карточка гаджета раскрыла модель его процессора, объём оперативной памяти и уровень производительности, который по меркам такого железа оказался вовсе не рекордным.

                                   

                                  Видеоигры постепенно проникают во все сферы жизни, в том числе в образование и науку. Их используют для исследований, разбирают на экзаменах, вводят целые дисциплины на их основе. Но иногда герои игр попадают в учебники совершенно случайно.

                                   

                                  На одной из российских улиц в «Яндекс Картах» появилась особая панорама, которая отправляет человека в виртуальную реальность. По словам компании, съёмку улицы выполнил робот-доставщик с 360-градусной камерой.

                                   

                                  Разработчики мобильного Linux-дистрибутива Ubuntu Touch анонсировали выход новой версии ОС 20.04 OTA-6. Также они раскрыли список устройств, на которые прошивка начнёт «прилетать» в ближайшее время, и рассказали об основных изменениях в ОС.