Нейромережа Audeo розпізнає музику фортепіано без звуку
Вашингтонський університет розробив технологію Audeo — це програмне забезпечення зі штучним інтелектом, яке може розпізнати та відтворити зіграну на фортепіано мелодію після аналізу руху рук музиканта. Про це повідомляє портал TNW.
Нейромережу навчали на відеозаписах піаніста Пола Бартона, який грає Моцарта і Баха. Штучний інтелект зміг визначити, які клавіші й в якому порядку натискаються — так він зчитує ноти.
Також алгоритм враховує час утримання і силу натиснення. Так визначається інтенсивність і тривалість. Потім Audeo передає зібрані дані на синтезатор, який транскрибує їх у звук.
Точність відтвореної нейромережею музики вчені оцінили в Shazam і SoundHound. Додатки розпізнали мелодії в 86% випадків. Це всього на 7% менше показників вихідного відео Пола Бартона.
«Audeo може бути розширений до віртуального піаніно з камерою, що записує тільки руки людини. Якщо ми помістимо камеру поверх справжнього піаніно, Audeo потенційно може допомогти в навчанні музикантів-початківців, відстежуючи положення їх рук», — заявив старший автор дослідження Елі Шлізерман.
Джерело: Knife
RELATED POSTS
Музичний форум ADE пройде онлайн 15 квітня
The Amsterdam Dance Event (ADE) запускає безкоштовний доступ до прямої трансляції серій ADE In Conversation за участю Richie Hawtin, 3Lau, Elrow, CAA та інших. Дискусійний онлайн форум стартує в четвер, 15 квітня, у прямому ефірі з Феліксом Мерітісом (Felix Meritis) в Амстердамі, де Richie Hawtin та 3Lau розкажуть про нові можливості для артистів, що виникають […]
Заарештовано підозрюваного у крадіжці картини Ван Гога
6 квітня голландська поліція заарештувала підозрюваного у крадіжці минулого року двох цінних картин Вінсента ван Гога та Франса Халса з різних музеїв. Картини, однак, вже ще не знайдені. У заяві, опублікованій у Twitter, прес-секретар поліції Марен Уондер (Maren Wonder) заявила, що 58-річний чоловік був заарештований у своєму будинку в голландському місті Баарн, що за 40 […]
Помер репер DMX
9 квітня помер американський репер DMX. Про це повідомив представник сім’ї порталу Pitchfork. Репер був госпіталізований 2 квітня після передозування наркотиками та подальшим серцевим нападом у своєму будинку в Уайт Плейнс, штат Нью-Йорк. 7 квітня артист проходив подальші тести функції мозку. Йому було 50 років. Сім’я повідомила: «Ми з глибоким смутком повідомляємо сьогодні, що наш […]
Hans Zimmer створює рінгтони на телефон
Hans Zimmer почав роботу над створенням нових рінгтонів. Відомий композитор фільмів об’єднався з китайським виробником смартфонів Oppo, щоб запропонувати користувачам два нових рінгтони для телефонних дзвінків, а також «оркестр системних звуків». Нові звуки також включають тихий сигнал тривоги та звук активації телефону, а також «цілий ряд звуків для сповіщень». Про проєкт Циммер каже: «Для мене […]
Гітарист Radiohead EOB записав ремікс на трек Paul McCartney — «Slidin’»
Гітарист гурту Radiohead Ед О’Брайен (Ed O’Brien) записав ремікс на пісню сера Пола МаКартні — «Slidin’». Трек з’явиться в альбомі «McCartney III Imagined», в якому буде представлено безліч запрошених виконавців — у тому числі Anderson .Paak, Idris Elba, Beck та Damon Albarn — усі вони створять власні ремікси на пісні з останнього сольного альбому Бітла […]