Команда разработчиков Google Japan предложила в дополнение к виртуальной клавиатуре Gboard, созданной Google для гаджетов под управлением Android и iOS, новое устройство Gboard Spoon Bending, которое обеспечивает более удобный способ ввода символов.

Версия Gboard Spoon Bending, выполненная в форм-факторе «ложка», основана на гибкости корпуса: вы вводите символы, сгибая ложку.

Всё, что вам нужно сделать, это подключить версию Gboard Spoon Bending к вашему смартфону или компьютеру, согнуть ложку и ввести соответствующую букву под этим углом. Чем меньше изгиб, тем ближе буква к началу к алфавиту, и чем больше изгиб, тем дальше буква дальше от начала.

Ещё более интригующим является то, что если вы сможете сгибать ложку с помощью мысли, процесс ввода символов можно будет ускорить. Команда Google Japan выпустила описание конструкции, эскизы, прошивки и так далее, так что вы даже сможете использовать домашний 3D-принтер для изготовления версии Gboard Spoon Bending в домашних условиях.

Некоторых может смутить довольно забавный форм-фактор Gboard Spoon Bending, но как полагают специалисты Google Japan, это наиболее подходящее решение для упрощения ввода данных на данный момент.

Хотя эта функция востребована немногими пользователями, всё же модуль Google Handwriting Input для клавиатуры Gboard позволяет набирать текст на мобильных устройствах с помощью рукописного ввода. Это полезно, например, при использовании цифрового пера. К моменту запуска в 2015 году функция работала с 82 языками, а за прошлый год их количество превысило сотню. Продолжая совершенствовать распознавание рукописного текста, наиболее заметного результата Google добилась с помощью машинного обучения.

В первоначальном подходе Google строка разбивалась на отдельные письменные символы, каждый из которых ассоциировался с несколькими вариантами подходящих букв, а затем подбирались наиболее вероятные слова. Теперь же происходит анализ последовательности ключевых точек с учётом временных меток и штрихов между ними, которая затем нормализируется и преобразуется в кубические кривые Безье. Этот процесс декодирования символов предоставляет вводные данные для многослойной рекуррентной нейронной сети (RNN). Экспериментируя с различными типами RNN, разработчики Google остановились на квазирекуррентных нейронных сетях (QRNN). Они обеспечивают лучшие результаты прогнозирования, что становится возможным благодаря чередованию свёрточных и рекуррентных слоёв.

Рекуррентная нейронная сеть создает матрицу, в которой каждый столбец соответствует одной входной кривой, а каждая строка соответствует букве в алфавите. Столбец для конкретной кривой можно рассматривать как распределение вероятностей по всем буквам алфавита (яркость ячейки соответствует степени вероятности). Однако каждая буква может состоять из нескольких кривых. Например, g и o на приведённом изображении состоят из четырёх и трёх кривых соответственно. Распознаватель на основе QRNN преобразует последовательность кривых в последовательность вероятностей символов. В матрице декодера встречаются в основном пробелы и яркие точки для символов «g» и «o», в результате чего выводится текст «go».

Новый подход позволил существенно, на 20–40 %, уменьшить количество ошибок при распознавании рукописного текста. Но для обеспечения удобного пользовательского окружения недостаточно добиться точной работы, её нужно сделать ещё и быстрой. Поэтому разработчики сконвертировали обученные в TensorFlow модели в модели TensorFlow Lite, вчетверо сократив нагрузку, и достигли минимальных задержек в клавиатуре Gboard при исполнении всех задач на самом мобильном устройстве.

Taptic Engine является одним из интересных качеств iPhone с 2016 года, однако большинство клавиатур iOS не поддерживают тактильную обратную связь. В некоторых нет даже соответствующих настроек. И вот компания Google выпустила новую версию Gboard 1.40 с поддержкой тактильной обратной связи. Теперь каждое нажатие на виртуальной клавиатуре сопровождается краткой вибрацией.

gadgethacks.com

Это работает на всех буквах, цифрах, спецсимволах, при доступе к поиску, YouTube, Google Maps или контактам, которые система предлагает автоматически. Аппаратными требованиями для работы Taptic Engine является iPhone 7 и более поздние модели смартфонов. Хотя сама клавиатура поддерживает смартфоны начиная с iPhone 5s.

Отметим, что на Android подобная функция была уже давно, поскольку там можно настраивать уровень вибрации в Gboard. Другие клавиатуры для iOS, вроде SwitfKey, предлагали подобные возможности в ограниченном варианте — при длительном нажатии и открытии панели Emoji. Другие же клавиатуры в App Store с полноценной поддержкой Taptic Engine являются платными. А «родная» клавиатура iOS по умолчанию не поддерживает тактильную отдачу.

9to5google.com

Кроме того, свежее обновление Gboard на iOS добавило поддержку для лаосского и монгольского языков и уменьшило размер приложения за счёт оптимизации ресурсов. Помимо быстрого доступа к поиску, в Gboard есть и другие функции, в том числе многоязычный набор текста, поддержка пользовательских тем оформления и различные стикеры.

Скачать Gboard для iOS можно из магазина App Store.

Разработчики из компании Google представили обновление для экранной клавиатуры Gboard, в котором с помощью искусственного интеллекта будут подбираться стикеры, эмодзи и GIF-изображения, релевантные переписке. Иначе говоря, система будет отслеживать контекст сообщений и предлагать свои варианты картинок.

engadget.com

При вводе текста в верхнем левом углу появляется иконка GIF. Если нажать на неё, пользователь увидит перечень рекомендованных изображений, который ИИ Google сформировал на основании анализа вводимого текста. К примеру, при пожелании «Доброго утра» появятся стикеры с завтраком или кофе, а на фразу «Хочу спать» система предложит эмодзи со спящими персонажами. Аналогичная система, к слову, работает во «ВКонтакте», где предлагаются варианты на сообщения «ОК», «Супер» и так далее. Подобное также есть и в мессенджерах Telegram, Viber и других, хотя зачастую там приходится сначала вводить смайлик, а уже на его основе система предлагает стикеры.

В Google заявили, что подбор рекомендованных изображений производится непосредственно на устройстве пользователя. То есть никакие данные не передаются на серверы компании. Это позволяет не только обеспечить приватность, но и ускорить процесс подбора. Ведь в противном случае пришлось бы ждать, пока данные загрузятся на сервер, обработаются и вернутся обратно. И это без учёта возможных сбоев на промежуточных узлах.

androidpolice.com

Новая версия Gboard уже доступна в некоторых странах на смартфонах и планшетах с ОС Android. При этом пока система поддерживает только английский язык. В будущем планируется расширить список языков, однако дата этого не указана. Также не известно, появится ли новая возможность на устройствах с iOS.

Виртуальная клавиатура Gboard для Android уже позволяет выразить свои мысли и чувства не только словами, но и при помощи смайликов, GIF-анимации, наклеек и так далее. Теперь Google добавила новую функцию, которая даёт возможность создать персонализированные наклейки на основе облика самого пользователя.

Дело в том, что Google добавила наклейки Mini в Gboard. Этот новый тип даёт пользователям возможность сделать автопортрет и получить на его основе рисованное подобие-эмотикон, похожий на Bitmoji из коллекции Gboard. Впервые это появилось в бета-версии Gboard в прошлом месяце, а также в приложении Android Messages. Сегодня, однако, функция заработает для всех.

Как и в случае Selfie Stickers в Allo, эти наклейки Mini позволяют пользователям задействовать ИИ для подобного рода самовыражения. Google объясняет работу так: «Функция использует комбинацию машинного обучения, нейронных сетей и иллюстраций художников, чтобы сконструировать наиболее близко похожее на пользователя изображение, принимающее во внимание различные характеристики: тон кожи, цвет волос и стиль причёски, цвет глаз, форма лица и волосяного покрова на нём».

Набор, на основе которого конструируют персональные наклейки, включает 100 различных стилей наклеек и формирует аватару в вариантах «Чёткая» или «Миловидная». Функция должна быть доступна на большинстве устройств в ближайшие дни вместе с развёртыванием обновления Gboard 7.5 в магазине Google Play.

Компания Google объявила о расширении возможностей мобильной клавиатуры Gboard: теперь народам России станет проще набирать текст на родных языках.

Gboard — это экранная клавиатура для смартфонов и планшетов. В приложении есть функция непрерывного набора текста и подсказки, которые упрощают набор текста на маленьком экране. Чтобы напечатать слово, нужно провести пальцем по буквам.

Google отмечает, что в России говорят на нескольких десятках языков, кроме русского. Во многих таких языках применяются дополнительные кириллические символы, которых нет в стандартной раскладке, а это усложняет набор текстов. Чтобы решить проблему, Google работает с лингвистами и носителями языков, добавляя поддержку дополнительных диалектов.

Сообщается, что в Gboard теперь поддерживаются 25 языков России. В частности, появились бурятский, сибирско-татарский, талышский, ингушский и карачаево-балкарский языки, а также ливвиковское наречие.

Утверждается, что на сегодняшний день Gboard поддерживает самое большое количество языков России, нежели любая другая виртуальная клавиатура. Загрузить приложение на Android-устройства можно отсюда. 

Google сообщила, что добавила новый метод ввода в клавиатуру Gboard для iOS — азбуку Морзе. Впервые функция появилась в бета-версии приложения для Android вскоре после завершения конференции I/O 2018. Теперь компания не только добавила азбуку Морзе в Gboard для устройств от Apple, но и внесла в неё ряд улучшений на Android.

После активации нового метода ввода в пространстве, где обычно отображаются традиционные буквы, появляются две большие кнопки с точкой и тире. Когда вы нажимаете на эти кнопки, то над ними появляются рекомендуемые слова — точно так же, когда вы вводите обычные буквы.

Google разработала игру, через которую, по её словам, можно изучить азбуку Морзе за час или даже меньше. Поиграть в неё можно через мобильный браузер на iOS и Android.

Разработчик вспомогательных технологий Таня Финлейсон (Tania Finlayson), которая помогала Google с интеграцией азбуки Морзе в Gboard, написала о том, как эта система помогла улучшить ей жизнь.

«Большинство современных технологий созданы для массового рынка, — заявила Финлейсон. — К сожалению, из-за этого люди с ограниченными возможностями могут отставать от остальных. Разработка таких коммуникационных средств важна, поскольку они существенно улучшают жизнь многих людей. Теперь любой, кто хочет воспользоваться азбукой Морзе, может использовать телефон в кармане. Просто скачав приложение, кто угодно и где угодно может попробовать пообщаться с помощью азбуки Морзе».

Финлейсон отметила, что Gboard для Android «позволяет подключать к устройству внешние коммутаторы, чтобы человек с ограниченными физическими возможностями мог им управлять».

Владельцы Android-гаджетов отмечают проблемы с экранной клавиатурой Gboard, указывая на некорректную работу функции проверки орфографии. Слова с ошибками, которые ранее ПО самостоятельно идентифицировало и выделяло методом подчёркивания красной линией, теперь остаются без отметки. 

Жалобы на проверку орфографии в Gboard приобрели массовый характер с учётом количества записей о данном баге, оставленных членами сообщества Reddit, а также темах на форумах Google. При этом некоторые пользователи смартфонов под управлением Android заявляют, что орфографические ошибки Gboard перестала выявлять ещё с ноября прошлого года. 

mobilesyrup.com

Описанная проблема указана и в Google Issue Tracker, что означает осведомлённость разработчиков в существовании бага с января 2018 года. Ситуацию с Gboard официальная сторона прокомментировала следующим образом:

«Мы передали всю необходимую информацию команде разработчиков. О сроках устранения проблемы станет известно позже  — по мере поступления конкретных сведений от технических работников». 

Тем не менее, спустя пять месяцев с момента официального уведомления цифровая клавиатура Gboard по-прежнему отказывается подчёркивать слова с орфографическими ошибками. 

Японское подразделение компании Google активно трудится, чтобы сделать ввод иероглифов наиболее простым, удобным и интуитивным. Gboard для Android и iOS непрестанно совершенствует методы ввода с помощью сенсорных дисплеев, но порой физическую клавиатуру не заменить ничем. К счастью, прогресс не стоит на месте, и Google решила усовершенствовать аппаратную клавиатуру.

Японцы пошли дальше простой реализации собственной классической клавиатуры, в которой для быстрой печати нужно запоминать расположение клавиш. Компания изобрела новый метод, позволяющий осуществлять рукописный ввод прямо на физической клавиатуре, поверх обычных клавиш с помощью специального устройства.

Чтобы привычная для пользователя USB-клавиатура получила сенсорные возможности, необходимо просто подключить её к небольшому устройству GBoard. Дополнительный плюс состоит в том, что аксессуар подключается к компьютеру, смартфону или планшету посредством Bluetooth 2.1. После этого пользователь может вводить буквы или японские иероглифы пальцем по клавишам.

С помощью машинного обучения алгоритмы GBoard постоянно улучшаются и подстраиваются под каждую отдельную клавиатуру и пользователя. По словам разработчиков, очень сложно транслировать нажатия кнопок в сенсорный ввод букв, но ИИ творит настоящие чудеса, и результат действительно впечатляет (Google даже утверждает, что отныне на физических клавиатурах нет нужды подписывать буквы):

Принцип рукописного набора японских иероглифов на обычной клавиатуре можно опробовать с помощью упрощённого программного алгоритма, доступного на официальном сайте (необходимо включить английскую раскладку). Компания отмечает, что в будущем планирует развивать технологию, добавляя поддержку сенсорного рукописного ввода в кнопочные телефоны, счёты и даже кукурузные початки — возможности почти безграничны.

Google продолжает развивать и улучшать свою основную Android-клавиатуру Gboard. Это означает не только интеграцию функций вроде эмотиконов или GIF-анимации, но и появление поддержки новых языков. Следующим важным шагом на этом пути стало добавление в Gboard китайского (как традиционного, так и упрощённого) и корейского языков, а также ещё двадцати других языков.

Google отмечает, что китайский и корейский были самыми запрашиваемыми языками. Это вполне естественно, учитывая, что в случае Китая речь идёт о наиболее населённой стране, а в случае Кореи — одной из самых развитых в Азии. В целом же Gboard для Android теперь поддерживает более 300 языковых разновидностей (охватывают 74 % населения мира). С полным списком поддерживаемых языков можно ознакомиться на официальном сайте — новые будут развёртываться по всему миру в течение следующих нескольких дней.

При этом Google подчёркивает, что её усилия направлены на только на поддержку самых распространённых в мире языков, но и в равной степени — на менее известные, вроде языка жителей острова Мэн (кельтская группа; практически вымерший) или маорийского (относится к полинезийской ветви австронезийской семьи языков).

Порой интеграция новых языков приводит разработчиков к встрече с людьми, с которыми в противном случае они вряд ли бы пересеклись. Например, недавно создатели Gboard работали с братьями Абдулаем и Ибраимом Барри (Abdoulaye, Ibrahima Barry), чтобы принести в Gboard поддержку алфавита Adlam языка фулани. На фулани в Африке разговаривают уже сотни лет, но до последнего времени он не имел своего алфавита, пока братья не изобрели его 26 лет назад в Гвинее. Поскольку Adlam не было в Gboard, носителям языка было сложно транслитерировать звуки своего языка, когда они набирали тексты.

Обычно процесс улучшения программного обеспечения с помощью машинного обучения очень централизован. Компании вроде Google и Apple собирают в одном месте информацию о том, как человек использует приложения, и с её помощью тренируют новые алгоритмы. В результате фотографии становятся чётче, а поисковые запросы — точнее.

Этот метод эффективен, но на постоянное обновление и сбор данных уходит много времени. При этом компаниям приходится хранить информацию о действиях пользователей на своих серверах, что вредит конфиденциальности. Google хочет исправить эту проблему, поэтому начала экспериментировать с новым методом тренировки искусственного интеллекта — федеративным обучением (Federated Learning).

Федеративное обучение направлено на децентрализацию работы искусственного интеллекта. Система не собирает данные в одном месте, чтобы тренировать алгоритмы, а проводит процесс обучения прямо на устройстве пользователя. В данном случае за улучшение ИИ отвечает процессор смартфона или планшета.

Google тестирует технологию через клавиатуру Gboard для Android. Приложение предлагает поисковые запросы на основе сообщений и запоминает, какими рекомендациями человек воспользовался, а какие проигнорировал. Так алгоритмы персонализируются прямо на устройстве. Для этого компания встроила в Gboard адаптированную версию программного обеспечения машинного обучения TensorFlow.

Как пишет Google, у этого метода есть несколько преимуществ. Он более конфиденциален, поскольку данные, используемые для улучшения приложения, не покидают устройство. Изменения вносятся мгновенно, поскольку человеку не нужно ждать, пока Google выпустит обновление.

Система оптимизирована таким образом, чтобы не влиять на работу аккумулятора и производительность устройства. Процесс обучения осуществляется только когда телефон «находится в режиме ожидания, подключен к сети электропитания и использует беспроводное соединение».

«Федеративное обучение позволяет создавать более интеллектуальные модели, обеспечивает меньшую задержку и энергопотребление, а также конфиденциальность», — подытожили исследователи Google Брендан Макмахан (Brendan McMahan) и Дэниел Рэмэдж (Daniel Ramage).

Google выпустила новую бета-версию Gboard для Android, которая включает в себя закруглённые клавиши и возможность свободно перетаскивать клавиатуру по экрану. Стабильная версия 6.2 должна стать доступна всем пользователям в ближайшие недели.

Клавиши в Gboard для Android слегка напоминают кнопки стандартной клавиатуры для iOS: теперь они не квадратные, а закруглённые. При нажатии на иконку G открывается навигационная панель с большими кнопками «вверх», «вниз», «влево» и «вправо». Там же находятся кнопки копирования, вставки и перемещения курсора.

9to5 Google

Полоса рекомендаций теперь включает не только эмодзи, но и «гифки». После ввода слова вроде «Привет» и нажатия на пробел Gboard показывает соответствующие теме сообщения анимированные картинки. Функция работает лишь в некоторых мессенджерах.

Одно из самых значимых нововведений версии 6.2 — возможность перетаскивать клавиатуру. Оно активируется через режим одноручного ввода: внизу экрана появилась новая кнопка для функции. После её включения клавиатуру можно свободно перемещать по экрану и изменять размер. Пространство для ввода в новом режиме значительно уменьшается.

9to5 Google

Нововведение полезно тем, что позволяет поместить клавиатуру в наиболее удобное для одноручного ввода место. Функция также даёт возможность оптимально разместить элементы управления при работе на планшете.

Чтобы опробовать Gboard 6.2, необходимо являться участником программы бета-тестирования.

Клавиатура Gboard, которая ранее была самостоятельным продуктом, стала частью основного приложения Google для iOS. Компания также добавила в него новые функции, включая виджет поиска и набор вариантов использования 3D Touch.

Gboard упрощает общение через мобильные устройства благодаря встроенным функциям поиска эмодзи, анимированных картинок и некоторым другим возможностям. С выходом обновления опция включения клавиатуры расположилась в настройках приложения Google.

В дополнение к этому, обновление добавило в приложение виджет «Популярное в Google», который отображается в центре уведомлений мобильной операционной системы. Виджет показывает горячие новости и актуальные статьи. При нажатии на заголовок открывается приложение Google, через которое материал можно читать.

Виджет можно включить, нажав на кнопку «Редактировать» в центре уведомлений или использовав функцию 3D Touch на иконке приложения. После этого отобразится предварительная версия виджета, которую можно добавить в центр уведомлений.

3D Touch открывает доступ и к другим новым опциям. Через иконку Google можно запустить голосовой поиск, поиск по картинкам и перейти в режим инкогнито. Доступна функция «Быстрый поиск», которая позволяет мгновенно начать набирать запрос.

Внутри приложения тоже появились возможности использования 3D Touch. Например, можно удерживать палец на иконке G в нижней части экрана, чтобы начать поиск в любое время. То же касается и поисковых результатов — 3D Touch позволяет просматривать контент в превью-режиме.

Все нововведения уже доступны в последней версии приложения Google для iOS.

Продвинутая клавиатура Gboard от Google обзавелась сразу несколькими полезными функциями, включая поддержку переводчика компании и упрощённый голосовой ввод. Также клавиатура научилась рекомендовать анимированные изображения и эмодзи во время ввода сообщений пользователем и получила новые темы оформления.

Вероятно, самым полезным нововведением является поддержка Google Translate. Теперь переводить сообщения на другие языки можно прямо во время их ввода без необходимости переключаться на отдельное приложение. В меню быстрого доступа клавиатуры появилась специальная кнопка, при нажатии на которую вводимые слова и фразы начинают переводиться прямо на ходу.

Темы оформления позволяют настраивать внешний вид клавиатуры на свой вкус — их список пополнился новыми живописными картинками, которые можно устанавливать в качестве фона через настройки приложения. По словам Google, скоро пользователям станут доступны новые темы.

Что касается рекомендуемых в режиме реального времени эмодзи, то эта возможность не нова, чего нельзя сказать о GIF-картинках. Gboard не только предлагает анимированные изображения, опираясь на контекст сообщений, но и позволяет использовать их в других приложениях — например, в Facebook Messenger, Snapchat и Allo.

Также интерфейс клавиатуры был усовершенствован таким образом, чтобы пользователям было проще переключаться между текстовым и голосовым вводом. Наконец, при нажатии на иконку G можно получить доступ к некоторым новым поисковым функциям.

Обновление уже стало доступно пользователям Gboard для Android. Когда оно выйдет на iOS, не сообщается.

Google внесла сразу несколько значительных изменений в клавиатуру Gboard для iOS, среди которых — ряд новых языков и функция голосового набора. Приложение вышло ещё в мае прошлого года и представляет собой виртуальную клавиатуру со встроенным поиском Google — через него можно находить анимированные картинки или просто какую-нибудь информацию, которую сразу же можно отправлять собеседнику. В декабре Gboard вышла на Android, заменив собой Google Keyboard.

VentureBeat

Теперь в iOS-версии приложения появился голосовой ввод — чтобы им воспользоваться, достаточно нажать на иконку микрофона и удерживать её, проговаривая текст сообщения. Google постоянно совершенствует свою технологию распознавания речи, поэтому голосовые функции начинают играть в сервисах компании всё большую роль. Например, теперь пользователи с помощью голоса могут редактировать и форматировать текст в Google Docs, а обладатели устройств на базе Android TV использовать естественные голосовые запросы для поиска контента.

В дополнение к голосовому набору, в Gboard для iOS появилась поддержка 15 новых языков, включая русский, латиноамериканский испанский, хорватский, чешский, датский, голландский, финский, турецкий и греческий.

Среди других нововведений — поддержка новых эмодзи, которые появились в iOS 10, и интерактивных открыток Google Doodle. В частности, теперь, когда Google размещает на своей главной странице поиска новую открытку в честь какого-нибудь знаменательного события, доступ к ней можно получить, нажав на небольшую иконку G на клавиатуре. Так пользователь может просмотреть открытку и получить больше информации по событию, к которому её появление приурочено.