Горячая тема сегодня
» » Учёные создали нейросеть, которая различает музыкальные инструменты на видео

Учёные создали нейросеть, которая различает музыкальные инструменты на видео

Учёные из MIT создали нейросеть PixelPlayer, которая умеет отличать музыкальные инструменты на видео. С её помощью можно выборочно отключать инструменты и делать их погромче, сообщает Engadget.

Учёные создали нейросеть, которая различает музыкальные инструменты на видео

PixelPlayer уникален тем, что работает сразу с тремя алгоритмами. Нейросеть определяет какой инструмент изображён на видео, затем выделяет его звуковую дорожку, потом синхронизирует данные. Чтобы обучить её этому, учёные использовали различные музыкальные видео. Их общий хронометраж превышает 60 часов.

После обучения, нейросеть научилась отличать музыкальные инструменты, которые изображены на видео. По заявлению разработчиков, PixelPlayer способен идентифицировать до 20 различных инструментов. Engadget отмечает, что алгоритм пока что работает не идеально. К примеру, он может ошибаться при взаимодействии с похожими инструментами.

Разработка MIT пригодится при редактировании старых аудиофайлов или работе с концертными аудиозаписями. PixelPlayer также можно использовать для обучения роботов методам определения различных звуков окружающей среды, таких как животные, транспортные средства и приборы.

MDlavka — наш магазин для любимых читателей. Новинки техники Apple по самым приятным ценам ждут вас каждый день с 10:00 до 21:00. Указав промокод macdigger при оформлении заказа, получите скидку 500 руб.

комментариев
Ваше имя: *
Ваш e-mail: *
  • bowtiesmilelaughingblushsmileyrelaxedsmirk
    heart_eyeskissing_heartkissing_closed_eyesflushedrelievedsatisfiedgrin
    winkstuck_out_tongue_winking_eyestuck_out_tongue_closed_eyesgrinningkissingstuck_out_tonguesleeping
    worriedfrowninganguishedopen_mouthgrimacingconfusedhushed
    expressionlessunamusedsweat_smilesweatdisappointed_relievedwearypensive
    disappointedconfoundedfearfulcold_sweatperseverecrysob
    joyastonishedscreamtired_faceangryragetriumph
    sleepyyummasksunglassesdizzy_faceimpsmiling_imp
    neutral_faceno_mouthinnocent
Подтвердите, что Вы не робот:
Свежие новости
20:00
Светлана Лобода: биография, личная жизнь, муж, дети, фото
11:00
Здоровье Бари Алибасова на сегодня, 20.06.2019: новости о состоянии
08:41
Зеленский предложил посмотреть, во что превратился Крым
08:01
Стриж залетел в окно: приметы
07:41
Медведев вступил в заочную перепалку с Кудриным
07:00
Странное поведение Алибасова после отравления попало на видео
07:00
Здоровье Бари Алибасова сегодня: последние новости на 20 июня 2019
06:41
Какие цифры приносят деньги и как использовать их
06:00
Летнее солнцестояние 21 июня 2019 года: традиции и приметы
06:00
"Прямая линия" с президентом 2019: задать вопрос, когда будет, дата прямой линии с Путиным
06:00
Магнитные бури в июне 2019 года: расписание по дням, когда ждать
06:00
Новые детали о состоянии Алибасова огорошили поклонников
05:00
Бари Алибасов сегодня, 20 июня: здоровье, последние новости сейчас
05:00
Какой сегодня праздник, 20.06.2019: церковный какой праздник сегодня
04:41
Петров пост с 24 июня по 11 июля 2019 года