Встречайте Bixby, виртуального помощника на Samsung Galaxy S8

Инджонг Ри, руководитель отдела исследований и разработок Samsung Mobile
Инджонг Ри, руководитель отдела исследований и разработок бизнес-группы Samsung Mobile Communications и автор идеи Bixby, персонального цифрового помощника Samsung.Джереми Каплан/Digital Trends

Когда Samsung выпустит Смартфоны Galaxy S8 и S8 Plus 29 марта команда виртуальных помощников, призванная прочесывать ваш почтовый ящик и наводить порядок в вашей цифровой жизни, станет немного более переполненной.

Алекса, Сири, Google Ассистент, Кортана: Знакомьтесь Биксби.

У искусственных помощников появилось новое имя, но Samsung утверждает, что он не будет рассказывать вам глупые шутки или прогноз погоды, а также не будет искать для вас факты в Интернете. Этот яркий помощник призван улучшить ваше взаимодействие с цифровой жизнью, а не только с вашими смартфон но ваша стиральная машина, термостат, пылесос — все. Это не что иное, как переосмысление того, как мы используем наши вещи.

Конечно, это смелые слова, но руководитель отдела исследований и разработок Samsung Mobile Communications Business Group им верит.

«С философской точки зрения мы рассматриваем революцию в интерфейсе», — сказал Инджонг Ри в интервью Digital Trends.

Частично это означает, что слухи верны — будут специальная кнопка Биксби на Галактика С8 и С8 Плюс.

Но что делает помощник? И чем он отличается от всех других помощников, которые загромождают наши телефоны и нашу жизнь, подслушивая, подключаясь и щебеча, чтобы помочь нам? Чтобы выяснить это, компания Digital Trends пролетела почти 7000 миль в Южную Корею, чтобы обсудить интерфейсы на естественном языке. и машинное обучение, а также ответить на самый важный вопрос: стоит ли передавать виртуальный ежедневник Биксби?

Планирование революции искусственного интеллекта

«После 10 лет смартфонов ждет еще одна революция», — объяснил Ри. Мы находились в конференц-зале Digital City, одного из офисных комплексов гиганта бытовой электроники в Сувоне, Южная Корея, примерно в получасе езды к югу от Сеула.

Цифровой город имеет ширину около двух миль и охватывает несколько офисных башен и жилых зданий. Она такая же большая, как подготовительная школа, и структурирована так же. Здесь есть широкие бульвары, площадь под открытым небом под названием Центральный парк (с звуками птиц!), а также гигантские подземные магазины и жилой комплекс, включающий два фитнес-центра, зоны отдыха, магазин Samsung, аптеки и торговые сети — даже Dunkin’ Пончики.

Samsung Сувон Южная Корея
Samsung Сувон Южная Корея
Samsung Сувон Южная Корея
Samsung Сувон Южная Корея

В Digital City работает около 20 000 человек, большинство из которых приезжают на работу из близлежащих пригородов. Они питаются три раза в день в столовых компании, заполняя коридоры с 11:30 до 13:30 на обед, армия людей смотрит на мобильные телефоны, работает над мобильными телефонами, планирует новые мобильные телефоны, покупает мобильные телефоны телефоны.

У Ри внешность рок-звезды, и прическа у нее соответствующая. Его приятно слушать, он увлекателен и явно увлечен Биксби, который, по его мнению, станет выдающимся инструментом. Видите ли, машинное обучение приводит в действие армию помощников, появившуюся в последние годы, из сверхинтеллектуальной системы IBM Watson, которая может перехитрить шахматных гроссмейстеров и мечты. предлагать свои собственные рецепты менее гибким ботам, таким как Siri, дружелюбный помощник, который живет в вашем iPhone и назначает вам встречи, сообщает, нужна ли вам куртка, и находит информация. Хотя машинное обучение чрезвычайно важно, сделать его полезным для потребителей оказалось непростой задачей.

Как Siri для iPhone или Google Assistant для Pixel, Bixby будет для Galaxy S8 — что-то встроенное и ключевое в интерфейсе.

Забудьте о Watson – это совершенно другой класс систем. Помощники, ориентированные на потребителей, такие как Alexa, Siri и Google Assistant (почему нет милого имени, Google?), кажутся лучше всего подходящими для поиска информации, утверждает Ри: на самом деле они не помогают вам использовать ваш гаджет. Подумайте о термине «пользовательский интерфейс»: Биксби стремится вернуть ему «пользу».

«Посмотрите на количество задач, которые могут выполнять нынешние агенты», — сказал Ри. «Это около сотни. Мы стремимся охватить все, что вы можете сделать с помощью сенсорной команды. Это очень амбициозная цель».

Например, приложение Samsung Gallery может выполнять 300 задач, и существует около 15 000 способов, которыми люди могут выполнять эти задачи пальцами, используя меню и так далее. Включите голос, и все усложнится. Ри сказал, что количество способов, которыми люди могут произносить эти команды, «различно на миллионах», и сегодняшние помощники не помогают нам выполнять эти команды. подавляющее большинство вещей, которые мы хотели бы сделать с помощью наших телефонов, не говоря уже о том, чтобы понять миллионы способов, которыми мы могли бы обратиться за помощью в их выполнении.

Что может сделать Биксби?

Вот в чем дело: вся эта информация основана на обещаниях Samsung. Компания не смогла дать нам много конкретных ответов о том, что может или не может делать Bixby, поэтому нам придется подождать и посмотреть, когда он выйдет вместе с Galaxy S8.

Что мы точно знаем, так это то, что Siri для iPhone или Google Assistant для Pixel, Bixby будет для Galaxy S8 — что-то встроенное и ключевое для интерфейса. Биксби может выполнять поиск по информационным запросам, но в отличие от других его основная роль — помочь вам использовать телефон.

Попросите Биксби найти фотографию розового зонтика, сделанную вами на прошлой неделе, немного украсить ее и отправить по электронной почте кузену Фестеру, и все это произойдет за вас. Samsung называет это мультимодальной возможностью и одной из умных вещей. Биксби хорошо справляется с проблемами в нем. Если команда не содержит достаточной информации для ее выполнения, Биксби по-прежнему будет вести пользователя настолько далеко, насколько это возможно, вместо того, чтобы пропускать все это. Он создаст электронное письмо и прикрепит фотографию, даже если не распознает в кузене Фестере Телониуса. Фестер@aol.com.

Но чтобы все это делать хорошо, ему нужно понимать естественный язык лучше, чем другие. Так может ли это?

Инджонг Ри выступает на конференции разработчиков Samsung 2016.Samsung

«Да с восклицательным знаком!» Ри рассказал нам. Это еще предстоит выяснить, конечно. Хотя мы потратили немало времени на разговоры с Ри о помощнике, у Digital Trends еще не было возможности протестировать его функциональность самостоятельно.

При запуске будет 10 предустановленных приложений, с которыми сможет работать Bixby, включая «Галерею», «Содержимое», «Настройки», «Камеру» и т. д. Ожидайте, что функциональность Календаря появится во второй волне приложений, готовых к Bixby, которая должна появиться через месяц после первой партии, и в аналогичные сроки последуют новые обновления. Чтобы воспользоваться услугой, вы можете просто поговорить с ней («Привет, Биксби!»), как и с другими помощниками, но Samsung считает, что это не самый интуитивный способ использования помощника.

Кнопка Биксби

Вместо этого Ри считает, что все гаджеты с поддержкой Bixby должны иметь кнопку, будь то смартфон для общения в стиле рации. в этом случае, конечно, не нужно говорить «привет, Биксби» — или стиральная машина с биометрическим сканером отпечатков пальцев, который вы нажимаете, прежде чем спросить Биксби запустить тяжелый цикл с низкой скоростью отжима. Биксби может быть повсюду, это клей, скрепляющий вашу умную жизнь. «Представьте себе кнопку на пульте дистанционного управления, — сказал Ри, — нажмите ее, чтобы попросить телефон найти фотографию, которую вы отправили кузену Фестеру, и показать ее по телевизору».

«Все начинается со смартфонов, но Bixby можно использовать везде, где есть подключение к Интернету и микрофон», — пояснил он. «Мы вложили в устройство некоторую часть технологий, но большая их часть находится в облаке».

Интерфейс

По словам Ри, Bixby состоит из четырех различных компонентов: голосовой агент, видение, дом и напоминания. Голосовой агент — это именно то, что вы ожидаете — говорите с Биксби и вы получите ответ или выполните действие. Напоминания — еще один простой способ. Два других более сложны.

Подумайте о термине «пользовательский интерфейс»: Биксби стремится вернуть ему «пользу».

Зрение — это способность Биксби использовать камеру для распознавания объектов — например, бутылки вина: Биксби отобразит несколько кнопок с надписями, описывающими элемент, который он видит (вот это машинное обучение снова). Нажмите кнопку вина, и вам сообщат, где можно купить божоле и сколько оно стоит. Или он мог угадывать достопримечательности, распознавать книги и так далее.

Если вы думаете, что это очень похоже на Google Goggles, вы не одиноки. Посмотрим, как Samsung разработает эту функцию.

Еще есть Bixby Home, который находится на экране слева от главного экрана. Как и приложение Google (ранее Google Now), оно имеет карточки с информацией и предложениями. о вещах, которые, как он знает, вам нравятся, и Samsung планирует сделать его расширяемым и позволить третьим лицам работать с этим. Он будет знать контекст, находитесь ли вы на работе или дома. Короткое нажатие на кнопку вызывает ее, в отличие от длительного нажатия, которое запускает Биксби слушаю.

Связь с Viv Labs

По словам Ри, Samsung начала всерьез работать над Bixby около полутора лет назад, но, конечно, компания уже много лет использует распознавание голоса и управление им через приложение S Voice. S Voice выполняет стандартные функции помощника — он запускает навигацию, чтобы доставить вас домой, или сообщает погоду.

«Основываясь на нашем опыте работы с S Voice, мы серьезно подумывали о его обновлении, и действительно изменить эту философию и основу, лежащую в ее основе, чтобы людям было намного легче ее принять», — Ри сказал. «И именно тогда мы начали работать над этим, около 18 месяцев назад».

Биксби не может сделать все, и Samsung тоже не может — у команды инженеров явно не было причин изобретать велосипед. Например, Google действительно хорош в поиске информации, и команда Ри работает над более простым способом передачи запроса от Биксби гуглить. И тут на сцену выходит Вив.

«Мы привлекаем Viv Labs для масштабируемого развития этой экосистемы», — объяснил он. Биксби создавался уже много лет, но недавний приобретение Вив – компания, созданная людьми, создавшими Siri, – поможет сделать ее великой. Команда Viv не создавала Bixby, но некоторые из работ, которые они проделали в последнее время, в частности, попытки сделать помощников расширяемыми, помогут отличить этот инструмент.

«Viv Labs собирается помочь в расширении сторонней экосистемы», — сказал Ри. «чтобы упростить представление функций и усовершенствовать их работу для третьих сторон».

Так что же с этим именем?

Вы спросите, почему Биксби? Было бы здорово, если бы был интересный ответ - если бы чей-то дядя был Филиппом Биксби, или какой-то парень спас собаку Ри от утопления, и, уходя, он оглянулся и прошептал: «Биксби.”

Неа.

Группа под названием «Центр дизайна» придумала это название и взяла его из короткого списка из трех, сокращенного из списка из тысяч. Его легко распознать с точки зрения машины, поскольку у него есть необходимое количество слогов для распознавания горячих слов. Они говорят, что оно может быть мужским или женским, и это скорее фамилия, чем имя. По их мнению, это понравится миллениалам, группе, которая очень дружелюбна к новым технологиям. В Samsung отметили, что это также название моста в Сан-Франциско, что немного более запоминающееся: «строить мосты» между вашими гаджетами и умным домом, между машиной и человеком и всем остальным.

Но прежде чем мы доберемся до моста, нам еще предстоит построить много проезжей части. Может быть, Биксби может в этом помочь? Биксби, ты здесь? Биксби?

Рекомендации редакции

  • Операция «Шуш»: взлет и падение нелюбимого помощника Биксби от Samsung