Может ли искусственный интеллект облегчить пользование электронными устройствами? Безусловно, намерены доказать в Samsung с помощью интеллектуального помощника Bixby.
Виртуальный ассистент Bixby установлен на смартфонах Galaxy S8 и S8+, анонсированных на днях. Он будет помогать смартфонам разговаривать, давать советы и делать напоминания. Например, Bixby способен помочь смартфонам исполнять приказы по голосовой команде. Кроме того, на борту «восьмерок» он сопровождает такие классные новшества, как распознавание изображений и языковой перевод.
Источник: IDG news |
Для Bixby на смартфонах предназначена специальная кнопка, но в Samsung не дают шанса его протестировать и не поясняют, когда именно он заработает. Это может случиться очень скоро, 21 апреля, когда комплекты S8 поступят в продажу — или отодвинуто на более поздний срок и объединено с обновлениями программного обеспечения. Пока в Samsung говорят, что сервису нужно некоторое время на «взросление».
Вот на что смартфоны Samsung Galaxy S8 будут способны с помощью нажатия кнопки активации Bixby.
Голос вместо пальцев
Что бы вы ни могли сделать с помощью касаний— все то же самое вам удастся посредством голоса. Вот на что Samsung нацеливает использование Bixby.
Скомандуйте телефону что угодно: снять селфи, открыть фотогалерею для просмотра, сделать телефонный звонок — аппарат сделает это. Вы можете произносить слова на разный манер — Bixby поймет и исполнит.
Распознавание изображений
Смартфоны Galaxy S8 будут уметь делать фотографии, распознавать объекты и давать пояснения к снимкам. В качестве примера Samsung приводит опознание Bixby известного нью-йоркского небоскреба «Утюг» и предоставление рекомендаций — где в окрестностях здания можно перекусить.
Эта возможность весьма полезна для шопинга: пользователи могут сфотографировать понравившуюся вещь и поместить снимок на Pinterest, который поддерживает партнерские отношения с Samsung. Также по этому снимку можно будет проверить цену, найти магазин, где она продается, почитать рекомендации и отзывы о продукте на сайтах розничных продавцов.
Перевод текста
Samsung предоставил интригующий пример как Bixby делает снимок текста и переводит его на другие языки. Samsung не объяснял детально — как именно это работает, так что гадать не имеет особого смысла. Bixby поддерживает 52 языка, но этот сервис не базируется на собственной домашней технологии Samsung. Вместо этого, компания для поддержки этого сервиса пользуется разработками партнеров. В Samsung не стали называть имени партнера и объяснять, пользуется ли компания для этой возможности разработками скрытого подрядчика, типа Google Translate.
Изучение привычек хозяина
Со временем Bixby запомнит привычки хозяина смартфона по использованию аппарата и начнет предвидеть необходимые действия. Эта фишка смартфонов Galaxy S8 проявится в форме организации и показа «карточек», основанных на предсказанных действиях.
Например, по утрам вы привыкли автоматически просматривать новости и погоду, или Bixby может сам вызвать вам такси, которое отвезет вас на работу. Вечером телефон напомнит вам поставить на утро будильник.
Работа с приложениями
В смартфонах линейки Galaxy S8 Bixby блистает на пару с камерами, доставляя больше контекста для изображений. Но есть и печальные новости: Bixby будет работать далеко не со всеми приложениями. Для начала он внедрен в несколько из них, такие как Фотогалерея, чья расширенная версия скоро появится. Позже Samsung обеспечит инструментарий разработки программного обеспечения, и в дальнейшем разработчики будут иметь дело с интерфейсом прикладных программ Bixby API.
API может оказаться полезным для розничных продавцов, желающих интегрировать свои магазины с механизмом рекомендаций Bixby. Также он может пригодиться разработчикам в производстве умных устройств, совместимых с системой управления Samsung SmartThings.
Что он заменит?
Хотя у него есть несколько схожих умений, Bixby не задумывался как копия сервисов типа Alexa от Amazon, Cortana от Microsoft, или Siri от Apple. Он также не является заменой голосового ассистента S Voice, отсутствующего на S8 и S8+, но оставшегося на устройствах с ОС Tizen.
Как утверждают в Gartner, Samsung планирует поселить Bixby и на других устройствах, производимых компанией, хотя пока не очень ясно, когда именно это произойдет.
Свои флагманы Galaxy S8 и S8+ . Оба смартфона получили нового голосового помощника Bixby.
А вот, собственно, что говорит Samsung касаемо Bixby:
Биксби-это не обычный голосовой помощник, а, скорее, интуитивно понятный и всеобъемлющий интерфейс, который использует контекстную осведомленность, чтобы узнать привычки пользователя и реагировать соответствующим образом.
Похоже, это действительно новый способ взаимодействия со своим смартфоном.
Другие помощники, такие как Siri, Google Assistant, Alexa и Cortana получают информацию по запросу в интернете, а потом доносят её до пользователя. Bixby отличается тем, что это не поисковик. Это помощник, направленный на упрощение пользовательского опыта при использовании телефона, приложений и услуг.
Для вызова Bixby достаточно назвать его имя вслух или нажать на специальную кнопку. Помощник выполняет 4 основные функции:
Bixby Voice
Bixby распознает естественную речь. Благодаря голосовому управлению пользователь может выполнять различные задачи, связанные со своим смартфоном. Мы говорим про звонки, галерею, настройки и так далее. Первоначально Bixby будет поддерживать английский и корейский, но впоследствии появятся и другие языки.
Bixby Vision
Bixby Vision использует камеру дополнительной реальности, чтобы определять окружающие предметы. В целом обо всем окружающем можно узнать всю необходимую и полезную информацию. Функционал также позволяет переводить текст, сканировать QR-коды и определять местоположение.
Bixby Reminder
Основываясь на рутинных вещах и местоположении пользователя, Bixby обеспечивает контекстным напоминанием. Пользователи могут создавать оповещения о заданиях в указанное время или месте. Дальше больше, Bixby Reminder может напомнить вам на какой странице вы закончили читать вашу книгу.
Bixby Home
Это собрание всего необходимого в одном месте. Все в чем нуждается пользователь: приложения, сервисы, рутинные обязательства и многое другое появляется на экране.
Bixby – это амбициозный проект от Samsung. Но пока что он работает только где-то с 10 приложениями для Android от Samsung. На мероприятии, посвященном этому инновационному помощнику, производитель уверял, что Bixby будет работать с помощью сторонних приложений и с Samsung Connect (умное подключение домашних девайсов).
Понимание естественного языка речи. Многие голосовые помощники до сих пор сильно ограничены в своём словарном запасе. Чтобы они вас поняли, нужно произнести какую-то особую фразу. Bixby же понимает естественную речь. По крайней мере, англоязычную. Лишь в крайнем случае он переспрашивает собеседника. Сильнее всего это будет заметно после того, как голосовой помощник станет очень популярным. Ведь сервису нужно активно изучать естественную речь, лишь только после этого он действительно научится её понимать. А для этого нужно время.
Напоминания. Расширена у голосового помощника и базовая функция, касающаяся напоминаний о тех или иных предстоящих событиях. Пользователь имеет возможность попросить ассистента напомнить о чём-то, когда он будет находиться в определенном месте. Опять же, предполагается, что команда будет произнесена обычной разговорной речью: «Напомни мне взять документы, когда я окажусь неподалеку от Чапаева 42».
Как пользоваться Bixby?
Как уже сказано выше, пока сервис работает только на Samsung Galaxy S8 и его увеличенном собрате. Установить голосовой помощник на какие-то другие устройства нельзя (по крайней мере, по состоянию на апрель 2017 года). Грубо говоря, покупатели нового флагмана пока тестируют этот сервис. Когда южнокорейцы поймут, что их творение работает практически идеально, они предоставят возможность его использования и владельцам некоторых других смартфонов Samsung. Ассистент поступит с очередным обновлением прошивки, заменив собой S Voice. Скачать его где-то на стороннем ресурсе вряд ли будет возможно. Хотя создатели всевозможных модов вполне могут как-то это реализовать.
Ещё следует заметить, что первые покупатели новых флагманов не смогут поиграться с Bixby. Дело в том, что южнокорейцам потребовалось чуть больше времени, чтобы доработать свой сервис. Активен он станет только в конце мая или начале июня 2017 года. Неизвестно пока и то, заговорит ли Bixby сразу на русском языке, либо этого придется ждать несколько месяцев или даже лет.
Пользоваться голосовым помощником очень просто. Достаточно нажать соответствующую кнопку и произнести вопрос или команду. Также после нажатия кнопки вы увидите стартовый экран ассистента. На нём собираются всяческие подсказки и прочая полезная информация. Например, здесь будут содержаться уведомления о действиях друзей в , количество совершенных вами шагов и многое другое. Порядок блоков на экране будет постоянно меняться, в зависимости от того, какая информация в данный момент является более важной.
Многие пользователи, которые недавно приобрели новый смартфон от компании Samsung, обнаружили на нем приложение под названием Bixby. Если вы также столкнулись с этим приложением, то предлагаем ознакомиться с нашей статьей. Здесь вы узнаете, что такое Bixby от Samsung, как оно работает и как им пользоваться.
Samsung Bixby – это голосовой помощник, который был представлен компанией Samsung весной 2017 года вместе со смартфонами Galaxy S8 и S8+. Фактически, Samsung Bixby является сильно переработанным приложением S Voice, которое предустанавливалось на смартфоны Samsung еще со времен Galaxy S III. Как и S Voice, помощник Samsung Bixby может отвечать на вопросы пользователей, выполнять несложные поручения или искать информацию.
Изначально, данный голосовой помощник был доступен только на смартфонах от компании Samsung, при чем как на новых, так и на старых моделях. Единственное ограничение – версия операционной системы. Для того чтобы установить Бикси на старый смартфон от Samsung, он должен работать под управлением операционной системы Android Nougat или более новой версии Android. Но, позже сфера применения Биксби расширилась, Samsung начала внедрять данного помощника в другую свою технику, например, в умные телевизоры и даже холодильники.
Bixby Home, Voice и Vision
– это приложение, которое доступно из главного экрана смартфона. Чтобы его открыть нужно провести пальцем вправо по главному экрану или сделать короткое нажатие на кнопку Bixby.
Bixby Home собирает разнообразную информацию, которая может быть интересна пользователю, и отображает ее в виде ленты с вертикальной прокруткой. Основное содержание этой ленты - это унифицированные карточки, которые содержат информацию из различных источников. Пролистывая эту ленту, пользователь может узнать о погоде, своей фитнес-активности, запланированных событиях, установленных будильниках и напоминаниях и т. д.
Ленту Bixby Home можно настроить под собственные потребности. Пользователь может отключить неинтересные карточки или наоборот, закрепить те, которые содержат наиболее актуальную и полезную информацию. Основным источником информации для карточек являются другие приложения Samsung, но Bixby Home может получать данные и со сторонних приложений. Например, есть карточки таких приложений как Spotify, CNN и Flipboard.
Bixby Voice – это приложение, которое запускается с помощью длительного нажатия на кнопку Bixby. Приложение Bixby Voice – это голосовая часть помощника Биксби, что-то вроде Siri, но от Samsung.
С помощью Bixby Voice можно отдавать голосовые команды и общаться с помощником с помощью голоса. Например, можно спросить о прогнозе погоды, попросить отправить текстовое сообщение, набрать номер телефона, изменить настройки или установить напоминание. Также поддерживаются и более сложные команды, в частности, Биксби может запускать приложения в режиме разделенного экрана, редактировать фотографии, напоминать о расположении вашего автомобиля, воспроизводить видео на телевизоре и многое другое. Компания Samsung заявляет, что Биксби может распознать и выполнить более 3000 различных голосовых команд. При этом помощник может взаимодействовать со сторонними приложениями, например, с Facebook, YouTube, Instagram, Uber, Google Maps или Gmail.
Также у Bixby Voice есть возможность общаться с пользователем в «телефоном режиме». Для этого пользователю нужно поднести телефон к уху, так как это делается во время телефонного звонка. Это позволит комфортно взаимодействовать с помощником в публичных местах.
– это компонент помощника Биксби, который встроен в приложение камеры. Этот компонент использует машинное обучение и базы данных партнеров Samsung для того, чтобы сделать камеру более полезной.
С помощью Bixby Vision можно идентифицировать фотографируемые объекты в режиме реального времени и искать о них информацию в различных интернет-сервисах. Например, для определения фотографируемых достопримечательностей и интересных мест Bixby Vision использует данные сервиса FourSquare.
Также Bixby Vision умеет распознавать QR-коды и переводить текст. Для того чтобы перевести иностранный язык достаточно навести камеру на текст и в поле зрения сразу появится его перевод. Эта функция поддерживает достаточно большой набор языков, поэтому она может быть очень удобной.
Из необычных возможностей Bixby Vision нужно отметить функцию «Макияж». Данная функция использует фронтальную камеру для того, чтобы применить к вашему лицу виртуальный макияж. На данный момент, таким образом можно «примерить» почти всю продукцию производителя косметики Sephora.
Как пользоваться Samsung Bixby
Для того чтобы начать использовать голосовой помощник Биксби можно воспользоваться отдельной кнопкой, которая присутствует на корпусе многих новых моделей от Samsung. Например, такая кнопка есть на Galaxy S8, Galaxy S9, Galaxy S9 Plus, Note 8 и Note 9. Быстрое нажатие на эту кнопку откроет Bixby Home, а более длительное нажатие вызовет Bixby Voice. Кроме этого, Bixby Home можно открыть если провести пальцем слева направо по главному экрану.
При первом открытии Samsung Bixby нужно будет принять пользовательское соглашение и предоставить доступ к своим данным. После этого можно настроить помощника под собственные требования. Для этого откройте Bixby Home, нажмите значок шестеренки в правом верхнем углу и перейдите в «Настройки».
Случается так, что появляются технологии или возможности, на которые вначале не обращаешь внимания или просто игнорируешь, так как кажется, что они не нужны. В памяти крепко сидит то, что по какой-то причине (а скорее без таковой) вам что-то не подошло. Так и тянется из года в год, когда под рукой лежит мощный инструмент, а ты ищешь костыли, так как ничего про него не знаешь. Попробуем раскрыть возможности камеры Bixby, чтобы вы точно знали, что она умеет и почему это интересно.
В любом флагмане Samsung последних лет в камере вы можете видеть кнопку Bixby, пропустить ее невозможно, но при первом запуске необходимо принять условия пользовательского соглашения. Многие люди просто игнорируют эту возможность, ленятся залезть и посмотреть, что это такое. Напрасно, так как камера Bixby дает целый набор инструментов, каждый из которых интересен сам по себе, а вместе они крайне полезны. Например, мне приходится часто искать те или иные изображения, причем это могут быть как товары, так и что-то другое. Обычный путь для этого незамысловат: сделать фотографию, загрузить в поиск по картинкам и листать списки, пока не наткнешься не нечто похожее, дальше смотреть текстовое описание. В какой-то мере это вчерашний день, так как камера сразу может определять предмет, на который вы смотрите, своего рода AI-алгоритм, который определяет в режиме реального времени, что перед ним. Пишу эти строки и навожу Bixby на ноутбук, тут же на экране возникло название модели, не прошло и пары секунд. Поиск осуществляется с помощью социальной сети Pinterest, также подбирается облако тегов. Бывают интересные открытия, которые совершенно неочевидны. В чем-то это развлечение, но также это мощный инструмент, который позволяет оценить, что есть в публичном пространстве и какие ассоциации вызывает у AI-алгоритмов предмет, на который вы смотрите. Полезный навык, чтобы фильтровать вещи популярные и не очень.
Да очень просто. Вы наводите камеру на текст, фотографируете, и дальше этот текст распознается, а вы можете использовать его как угодно. Например, скопировать в письмо или мессенджер, сохранить в заметки, это электронная копия того, что вы только что видели. Качество распознавания текста отличное, причем для любого из мировых языков, так как используется движок от Google. Также доступен перевод на любой и с любого языка из тех, что знает Google Translate. Машинный перевод не так хорош, как работа живого переводчика, но с каждым годом он улучшается.
В поездках, например, в Японию, камера Bixby – это палочка-выручалочка, вы моментально получаете перевод меню, объявлений, да чего угодно. И ровно то же самое во всех странах, где вы сможете побывать, любой печатный текст камера проглатывает, чтобы тут же дать электронную версию и перевод. Удобно? Не то слово. Для меня это одна из фишек, которые делают Bixby инструментом повседневного использования, интеграция привычных сервисов с камерой от Samsung дает новое качество, которым приятно и удобно пользоваться. Конечно, можно по старинке делать все ровно то же самое, но это куча лишних телодвижений, и попробовав раз камеру Bixby, жить по старинке не хочется.
Следующая возможность интересна для тех, кто часто ездит в другие города или страны. Я позабыл, когда использовал 4square в последний раз, сервис забылся, потеряв свою игровую составляющую, тем не менее, в нем огромное число интересных мест. В камере Bixby можно посмотреть на них, достаточно просто провести камерой и увидеть на карте отдельные точки. Дальше вы можете посмотреть описание, увидеть расстояние до точки и так далее. Конечно же, можно проложить маршрут, тут же откроются карты.
Для большинства это будет игрушкой, но она интересна, так как уже пару раз находил места, которые пропускал. Так, нашел в Лондоне дом-музей Диккенса, хотя несколько раз жил рядом и на картах его не замечал. Плюс вы можете выбирать различные фильтры, что делает поиск индивидуальным. Кто-то скажет, что это не очень полезная штука в повседневной жизни, и будет прав, для меня это всегда поездки, и именно в них я смотрю на мир сквозь объектив камеры Bixby.
Как в старом анекдоте про логику и Василия Иваныча, нужно перейти к следующей опции, а именно оценке вина. Да, камера Bixby интегрирована с Vivino, это сервис для поклонников вина, где можно вести свои записи, оценивать вино и сохранять те сорта, что вы еще только хотите попробовать. В Vivino меня можно найти с легкостью, мое имя Eldar Murtazin. Но для тех, кто не приобщился к этой социальной сети, не хочет регистрироваться, все равно остается возможность искать в Bixby описание вина, поиск легок, точен и незамысловат. И это снова возможности камеры, которые совсем неочевидны, это анализ картинки и привязка найденных этикеток к огромной базе, которая собрана специализированным сервисом.
А еще есть важная закладка в камере Bixby, где вы можете считывать QR-коды. Штука популярная и полезная, часто в рекламе используются такие коды, наверняка вы с этим сталкивались. Существуют тысячи программ, которые умеют расшифровывать коды, этим сегодня никого не удивить. Но есть небольшая проблема, с которой сталкиваются пользователи недорогих смартфонов, это качество камеры.
Когда QR-код идеален, сделан большим, то вы гарантированно его прочитаете. А что делать, если по какой-то причине QR-код небольшой? Например, в Испании мне попалась вот такая листовка, QR-код очень мал, и большинство телефонов/программ его просто не могут считать.
В моем аппарате от Samsung такой проблемы нет, на чтение ушло чуть больше времени, но код прочитан, ссылка тут же открылась в браузере. Это вопрос того, что в современном смартфоне важна связка как железа, так и софта, одно без другого никак не работает.
По отдельности функции Bixby камеры, возможно, не нужны, кто-то не интересуется вином, кто-то не ищет по фотографиям предметы, а кто-то сиднем сидит дома и никуда носа не высовывает. Но все вместе дает инструмент, который пригодится современному и активному человеку, думаю, что именно такие люди в массе своей пользуются флагманами от Samsung, ведь это осознанная покупка. Приятно, что в Samsung не стали пытаться изобрести велосипед и сделали интеграцию камеры Bixby с уже существующими, популярными социальными сетями и сервисами, увязали в одной оболочке все то, что нравится людям. Отличная камера от Samsung плюс популярные сервисы – это беспроигрышная связка.
В моем окружении много тех, кто приобрел флагманы от Samsung и пользуется камерой в повседневных делах, но крайне немного тех, кто освоил Bixby. Причина в том, что люди просто не добираются до этого пункта, оставляют на потом. Но когда показываешь, как это работает, или люди видят, что ты делаешь на телефоне, они моментально погружаются и начинают пользоваться камерой Bixby. Причина? Она банальна – это удобно и просто, а главное, полезно. Советую и вам попробовать, чтобы у вас сложилось собственное мнение о камере Bixby и о том, что она умеет.