Горячая тема сегодня
» » Учёные создали нейросеть, которая различает музыкальные инструменты на видео

Учёные создали нейросеть, которая различает музыкальные инструменты на видео

Учёные из MIT создали нейросеть PixelPlayer, которая умеет отличать музыкальные инструменты на видео. С её помощью можно выборочно отключать инструменты и делать их погромче, сообщает Engadget.

Учёные создали нейросеть, которая различает музыкальные инструменты на видео

PixelPlayer уникален тем, что работает сразу с тремя алгоритмами. Нейросеть определяет какой инструмент изображён на видео, затем выделяет его звуковую дорожку, потом синхронизирует данные. Чтобы обучить её этому, учёные использовали различные музыкальные видео. Их общий хронометраж превышает 60 часов.

После обучения, нейросеть научилась отличать музыкальные инструменты, которые изображены на видео. По заявлению разработчиков, PixelPlayer способен идентифицировать до 20 различных инструментов. Engadget отмечает, что алгоритм пока что работает не идеально. К примеру, он может ошибаться при взаимодействии с похожими инструментами.

Разработка MIT пригодится при редактировании старых аудиофайлов или работе с концертными аудиозаписями. PixelPlayer также можно использовать для обучения роботов методам определения различных звуков окружающей среды, таких как животные, транспортные средства и приборы.

MDlavka — наш магазин для любимых читателей. Новинки техники Apple по самым приятным ценам ждут вас каждый день с 10:00 до 21:00. Указав промокод macdigger при оформлении заказа, получите скидку 500 руб.

комментариев
Ваше имя: *
Ваш e-mail: *
  • bowtiesmilelaughingblushsmileyrelaxedsmirk
    heart_eyeskissing_heartkissing_closed_eyesflushedrelievedsatisfiedgrin
    winkstuck_out_tongue_winking_eyestuck_out_tongue_closed_eyesgrinningkissingstuck_out_tonguesleeping
    worriedfrowninganguishedopen_mouthgrimacingconfusedhushed
    expressionlessunamusedsweat_smilesweatdisappointed_relievedwearypensive
    disappointedconfoundedfearfulcold_sweatperseverecrysob
    joyastonishedscreamtired_faceangryragetriumph
    sleepyyummasksunglassesdizzy_faceimpsmiling_imp
    neutral_faceno_mouthinnocent
Подтвердите, что Вы не робот:
Свежие новости
14:07
Как укрепить волосы в домашних условиях
14:06
Как влияют стволовые клетки на организм человека
14:06
5 натуральных способов как избавиться от сыпи на теле в домашних условиях
13:00
Как себя чувствует Анастасия Заворотнюк: новости сегодня, 19.09.2019
11:01
Сегодня Анастасия Заворотнюк, 19.09.2019: здоровье, новости последние сейчас, 19 сентября
07:00
Анастасия Заворотнюк сейчас, 19.09.2019: последние новости, состояние здоровья, как себя чувствует сегодня, 19 сентября
06:41
Как определить характер человека по форме ногтей
05:41
Приметы и обычаи на Рождество Богородицы
04:42
Как избежать осенней депрессии: советы для Знаков Зодиака
04:41
Новости сейчас о состоянии здоровья Заворотнюк: как себя чувствует актриса
04:00
Осеннее равноденствие в сентябре 2019 года: приметы и ритуалы
03:41
Анастасия Заворотнюк сегодня, 19.09.2019: состояние здоровья, новости последнего часа
03:41
Появились новые подробности о состоянии здоровья Заворотнюк
03:41
Анастасия Заворотнюк, как себя чувствует: последние новости на сегодня, 19 сентября
03:41
Какой сегодня праздник, 19.09.2019: какой праздник церковный сегодня, 19 сентября