Последнее объявление Google на Search On 2020, вероятно, станет самым популярным. С сегодняшнего дня вы можете «напеть для поиска» с помощью Google, чтобы выяснить, какая песня застряла у вас в голове.
Теперь Google позволяет «напевать, насвистывать или напевать мелодию» в поиске на мобильных устройствах. В приложении Google для Android и iOS вы можете нажать на микрофон и сказать «что это за песня?» или нажать кнопку «Найти песню».
Вы должны напевать в течение 10-15 секунд, прежде чем будут предоставлены «Результаты из Google Поиска». Этот список включает обложку альбома и имя исполнителя, а также процент совпадения.
«Напеть для поиска» также работает в «Ассистенте» после произнесения «Привет, Google, что это за песня».
Эта функция в настоящее время доступна на английском языке в iOS и более чем на 20 языках в Android. И мы надеемся расширить ее на другие языки в будущем.
После прослушивания вашего образца, независимо от высоты тона, алгоритмы машинного обучения используются для идентификации совпадающих мелодий:
Когда вы напеваете мелодию для поиска, наши модели машинного обучения преобразуют аудио в числовую последовательность, представляющую мелодию песни. Наши модели обучены идентифицировать песни на основе различных источников, включая пение, насвистывание или напевание людьми, а также студийные записи. Алгоритмы также отбрасывают все другие детали, такие как аккомпанирующие инструменты, тембр и тон голоса. То, что у нас остается, — это числовая последовательность песни, или ее отпечаток.
Мы сравниваем эти последовательности с тысячами песен со всего мира и определяем потенциальные совпадения в режиме реального времени. Например, если вы слушаете «Dance Monkey» группы Tones and I, вы узнаете песню, независимо от того, пели, насвистывали или напевали вы ее. Аналогично, наши модели машинного обучения распознают мелодию студийной версии песни, которую мы можем использовать для сопоставления с напетым аудио человека.
Эта технология восходит к функции «Сейчас играет», представленной с Pixel 2 в 2017 году, которая может идентифицировать играющие вокруг вас песни даже в автономном режиме. Годом позже это усовершенствование было добавлено в виджет SoundSearch. Теперь Google не нужно слышать оригинальное аудио или даже текст, чтобы распознавать треки.