Recorder — одно из лучших применений Google в области машинного обучения (ML) на устройстве, эксклюзивное для телефонов Pixel. Приложение для транскрипции неожиданно появилось в Google Creative Lab, поскольку компания стремится создавать больше «Pixel Smarts».
Помимо захвата аудио, Recorder также транскрибирует произнесенные слова в реальном времени без подключения к Интернету. Это преобразование речи в текст происходит полностью на вашем Pixel, поэтому оно остается конфиденциальным и может быть удобно найдено мгновенно.
Приложение также может маркировать звуки, такие как музыка и даже смех, в то время как функция Smart Scrolling «отмечает важные разделы в транскрипции» ключевыми словами для быстрого просмотра. Более поздние обновления добавили создание клипов для обмена с редактированием, резервное копирование в облаке и обмен по ссылкам, а также редизайн Material You с ландшафтным режимом, похожим на планшет.
Recorder, конечно, использует достижения в области машинного обучения от Google Research, но приложение было в значительной степени создано Google Creative Lab, которая описывает себя следующим образом:
Команда дизайнеров, писателей, программистов, кинематографистов, продюсеров и бизнес-мыслителей, которые 99,9% времени посвящают созданию. Мы небольшая команда, которая стремится к влиянию, превышающему наш след. Наша работа — помочь изобрести будущее Google и донести инновации Google таким образом, чтобы они были полезны большему количеству людей.
Creative Lab охватывает широкий спектр направлений: от рекламы — наиболее известной Parisian Love — и брендинга до продуктов как больших, так и малых. Последние включают множество уникальных инструментов и впечатлений, часто перечисленных на Experiments with Google, в то время как Project Guideline, который помогает людям с ослабленным зрением передвигаться самостоятельно, является «сотрудничеством между Google Research, Google Creative Lab и командой Accessibility».
В сравнении, Recorder, который был также создан командой Pixel Essential Apps, представляет собой более масштабную задачу. Creative Lab взяла относительно новую разработку ML (полностью нейронный распознаватель речи на устройстве) и дала ей очень практическое применение, что полностью соответствует миссии группы.
Заглядывая вперед, Google очень хочет создавать больше подобных функций для Pixel, наняв кого-то для руководства «Pixel Smarts». Забавно, что позже компания обобщила это описание до «Android System Intelligence», которая является фоновой службой, обеспечивающей многие возможности ML, но наиболее полнофункциональной на Pixel. (Цитаты ниже относятся к первоначальному описанию вакансии.)
В качестве директора по управлению продуктами для Pixel Smarts вы будете сосредоточены на создании дифференцированных функций на Pixel, использующих наш опыт в области машинного обучения. Это потребует глубокого, инновационного изучения потребностей пользователей и технологических возможностей. Кроме того, вы будете участвовать и руководить этим исследованием, создавать дорожную карту продукта и помогать создавать команду по продуктам.
Существующие примеры включают фоновое определение Now Playing с Pixel 2, более энергоэффективное автоматическое распознавание речи для Recorder и Live Caption, а также Assistant на устройстве и голосовой набор Gboard.
Google хочет, чтобы Pixel «использовал передовое машинное обучение и создавал дифференцированные умные функции, используя уникальное аппаратное обеспечение Pixel и интеграцию функций».
