Голосовой помощник Google научился находить песни по свисту или напеву

Google добавил в свой голосовой помощник Google Assistant новую возможность, которая может найти песню по насвистыванию или напеву человека. Эта функция доступна на английском языке для iOS и более чем на 20 языках для Android.

Чтобы найти нужную песню достаточно открыть Google Assistant, а затем напеть мелодию. Когда пользователь закончит напевать, алгоритм машинного обучения поможет определить похожие песни и покажет вероятные варианты. Затем можно выбрать наиболее подходящее совпадение и изучить информацию о песне и исполнителе, а также послушать её в приложении или посмотреть любые сопровождающие музыкальные видеоклипы.

Как это работает?

Мелодия песни подобна отпечатку пальца: у каждой есть своя уникальная идентичность. Разработчики Google создали модели машинного обучения, которые позволяют сопоставить свист или пение человека с нужным «отпечатком пальца».

Когда пользователь напевает мелодию в поиске, модели машинного обучения преобразуют звук в цифровую последовательность. Алгоритмы убирают все другие детали, такие как аккомпанирующие инструменты, тембр и тон голоса. Остаётся только номер песни или отпечаток пальца. Далее алгоритм сравнивает эту последовательность с тысячами песен со всего мира и определяет потенциальные совпадения в режиме реального времени.