Нейромережа Audeo розпізнає музику фортепіано без звуку
Вашингтонський університет розробив технологію Audeo — це програмне забезпечення зі штучним інтелектом, яке може розпізнати та відтворити зіграну на фортепіано мелодію після аналізу руху рук музиканта. Про це повідомляє портал TNW.
Нейромережу навчали на відеозаписах піаніста Пола Бартона, який грає Моцарта і Баха. Штучний інтелект зміг визначити, які клавіші й в якому порядку натискаються — так він зчитує ноти.
Також алгоритм враховує час утримання і силу натиснення. Так визначається інтенсивність і тривалість. Потім Audeo передає зібрані дані на синтезатор, який транскрибує їх у звук.
Точність відтвореної нейромережею музики вчені оцінили в Shazam і SoundHound. Додатки розпізнали мелодії в 86% випадків. Це всього на 7% менше показників вихідного відео Пола Бартона.
«Audeo може бути розширений до віртуального піаніно з камерою, що записує тільки руки людини. Якщо ми помістимо камеру поверх справжнього піаніно, Audeo потенційно може допомогти в навчанні музикантів-початківців, відстежуючи положення їх рук», — заявив старший автор дослідження Елі Шлізерман.
Джерело: Knife
Новые посты:
RELATED POSTS
Billie Eilish представила новий трек та кліп «Your Power»
Співачка Billie Eilish порадувала фанатів виходом свого нового синглу «Your Power» та кліпу до нього. Чарівна мелодія та чуттєвий голос дівчини захоплюють з перших секунд. У пісні, Біллі висвітлює проблему насилля. Музичне відео, спродюсоване самою Біллі, починається з аерофотозйомки гір, перш ніж глядач побачить Айліш, яка сидить на горі. Потім співачку починає обвивати змія. Про […]
Прем’єра! Bjarki та GusGus випустили кліп на трек «Чорнобиль»
Ісландський гурт GusGus і продюсер та виконавець Bjarki випустили спільний кліп на трек «Чорнобиль» до 35-ї річниці трагедії на Чорнобильській АЕС. Режисером відео став українець Валерій Коршунов, відомий своїми культурними та соціальними проєктами, такими як «Звуки Чорнобиля», ARTEFACT і навіть перша діджитал-ікона України – «Чорнобильський Спас». Сюжет цього відео захоплює – колишня мешканка возз’єднується зі […]
«Звуки Чорнобиля»: нові кліпи, AR-платівка та документалка на Телебаченні Торонто
24 квітня міжнародні артисти GusGuS, Bjarki та Dub FX презентують унікальні кліпи, присвячені аварії на ЧАЕС, а альбом «Звуки Чорнобиля» з’явиться на Spotify, Apple Music і Youtube Music. Восени 2020 року українські та міжнародні музиканти GusGus, KAZKA, «Вагоновожатые», ATOMIC SIMAO, TELEPOPMUSIK, Bjarki, Dub FX, Сергій Міхалок, Олександр Чемеров, Стасік, KRUTЬ об’єдналися у тематичний проєкт Валерія […]
Для відвідування Burning Man потрібне обов’язкове щеплення
Організатори фестивалю Burning Man розглядають можливість вимагати від учасників довести, що вони були щеплені проти COVID-19, якщо фестиваль все ж відбудеться. Організатори кажуть, що до кінця місяця вони точно не вирішать, чи відбудеться цього літа подія, скасована минулого року через пандемію. Генеральний директор Burning Man Маріан Гудель (Marian Goodell) заявила у відеозверненні, розміщеному на веб-сайті […]
Snoop Dogg випустив альбом та NFT-гіфки до «420»
Репер Snoop Dogg 20 квітня, в день марихуани, який святкують в США і Канаді, представив новий альбом From tha Streets 2 tha Suites, а також кліп на один з треків. В альбом увійшли 10 треків, в записі яких брали участь Devin the Dude, Kokane, Mozzy, Tha Eastsidaz, Goldie Loc, Big Tray Deee та J Black. […]