Нейросеть научили «слышать» цвета и «видеть» музыку

0
Визуализация

«Синестезия» – это редкий психофизиологический феномен, при котором происходит смешивание разных сенсорных ощущений. Например, у человека появляется способность слышать цвета или чувствовать вкус слов. Обычно синестезия возникает при серьезных сбоях в работе нервной системы, при употреблении веществ для расширения сознания, либо при целенаправленном проведении творческих экспериментов. Теперь это редкое умение доступно и искусственному интеллекту.

Бельгийский исследователь и преподаватель в области машинного обучения Ксандер Стинбрюгге разработал нейросеть нового типа, которая способна «включать» синестезию по команде. Она так и называется «Neural Synesthesia». На данный момент нейросеть подбирает визуальные формы для музыкальных композиций, используя готовые художественные решения и сгенерированные ей самой образы.

По словам Стинбрюгге, этот проект является попыткой создания новых подходов в разработке аудиовизуальных решений, основанных на применении ИИ. Оператор не знает и даже не представляет себе конечный результат, он лишь задает ИИ некоторые критерии и дает указания, какие базы данных, какой контент следует использовать. Далее нейросеть сама генерирует визуальный ряд, который может быть принят оператором или отправлен на доработку. Это не чистое творчество – скорее, попытка обучить ИИ воспринимать музыку так, чтобы уметь выразить ее в ином сенсорном формате.

Источник — Xander Steenbrugge
Поделиться
Вконтакте
Комментарии  0
    (без регистрации)
    Любопытныйфакт
    Компанию Lego можно назвать мировым лидером по выпуску автомобильных шин, если считать именно единицы готовой продукции. Согласно данным 2011 года, Lego произвела 381 миллион шин, что более чем в два раза превосходит показатели каждой из компаний Bridgestone, Michelin и Goodyear.
    Обновить
    Советуем
    Сантехника №1 - магазин сантехники
    и мебели для ванной комнаты
    СвежиеКомментарии

    ВойтиРегистрация
    Вход
    Почта:
    Пароль:
    Регистрация
    Почта:
    Имя:
    Пароль: