Віртуальне піаніно Google дозволяє грати під акомпанемент штучного інтелекту

Віртуальне піаніно Google дозволяє грати під акомпанемент штучного інтелекту

Google випустила робочу інтерактивну версію AI Duet - програми, що дозволяє грати на віртуальному піаніно під акомпанемент комп'ютерної системи. Додаток було представлено ще в листопаді музикантом Йотамом Манном (Yotam Mann), що працює в Google Creative Lab у Нью-Йорку. Приблизно тоді ж він опублікував відкритий вихідний код проекту, на основі якого розробники могли створювати свої додатки. Тепер же Google створила такий додаток для тих, хто не має навичок у програмуванні.


AI Duet може працювати як на комп'ютері, так і на мобільному пристрої: у першому випадку для гри використовуються клавіатура або миша, у другому - сенсорний екран. Додаток дійсно реалізовано дуже цікаво - настільки, що в грудні на 31 щорічній конференції з машинного навчання і нейровичислениям NIPS отримало приз «Краще демо».


Додаток використовує відкриту аудіозабезпечення Tone.js, створену Манном. Також для того, щоб правильно реагувати на натискання користувача на клавіші, AI Duet задіє Magenta - бібліотеку, побудовану на базі фреймворку Google для глибокого навчання під назвою TensorFlow, що має відкритий вихідний код.

Час від часу AI Duet реагує на гру користувача однією або більше нотою, які можуть звучати незвично - наприклад, нижче або довше, ніж потрібно. Тим не менш, за словами Дага Ека (Doug Eck), дослідника Google, що працює над Magenta, це швидше перевага, ніж недолік. "Я думаю, несподіванка - це одна з найважливіших речей, про які можна говорити, займаючись генеративним медіа, - сказав Ек. - Коли все передбачувано, то це вже не так цікаво ".

Image

Publish modules to the "offcanvas" position.