Что ИИ-устройство получает от физического воплощения? Начните с элементов управления, а не с тактильности
Для обычного творческого процесса — набросков идей, создания бита, расстановки персонажей или объектов — полезный вопрос заключается не в том, может ли ИИ-устройство казаться живым. Вопрос в том, делает ли его физическая форма действие более простым для начала, управления или понимания. Тактильная отдача может помочь, но это лишь одна из составляющих. Удачно расположенный дисплей, понятная кнопка, осязаемый элемент управления и разумная очередность реплик в голосовом диалоге решают разные задачи взаимодействия. Лучший дизайн дает каждому каналу свою функцию и позволяет человеку переключаться между ними без лишних усилий.
Что дает овеществленный интерфейс?
Экран отображает цифровую информацию; физический интерфейс может также придать действиям местоположение, форму и движение. В своей основополагающей статье о концепции «Tangible Bits» Хироси Исии и Бригг Уллмер описывают связывание цифровой информации с осязаемыми объектами и поверхностями, благодаря чему пользователи могут управлять информацией с помощью физических предметов. Их примеры включают перемещение физических моделей для управления цифровой картой. Эта дизайнерская идея полезна для творческого процесса: ручка, изменяющая темп, фишка, выбирающая персонажа, или ползунок, смешивающий два звука, могут превратить цифровую возможность в конкретное действие. Ishii and Ullmer, «Tangible Bits: Towards Seamless Interfaces between People, Bits and Atoms»
Преимущество заключается не просто в «большем количестве задействованных чувств». Это более точное соответствие между тем, что делает рука, и тем, что меняется на экране или в звуке. Это может сделать экспериментирование более понятным: поверните регулятор — услышьте смену ритма; передвиньте фишку — увидите, как изменился выбранный элемент. Это вывод из исследований осязаемых интерфейсов, а не гарантия того, что физические элементы управления всегда улучшают процесс. Физический объект оправдывает свое присутствие тогда, когда его форма и движение соответствуют действию, которое пользователь может легко понять.
Когда физические кнопки лучше голоса?
Кнопка полезна, когда человеку необходимо решительно начать или остановить действие: запустить запись, зафиксировать вариант, отменить действие или переключить режим. Ее расположение позволяет легко найти ее, не перемещаясь по меню. Кнопка также передает простое правило взаимодействия: нажми сюда, чтобы сделать это. При регулярном использовании небольшой набор четко различимых элементов управления можно освоить быстрее, чем длинную голосовую команду.
Голос лучше подходит для запросов, которые неудобно кодировать одним нажатием, таких как «сделай это медленнее» или «предложи три более ярких варианта». Но речь вводит понятие очередности реплик: человек должен закончить говорить, система должна решить, когда ответить, а человек должен заметить, что она вступила в диалог. Исследования ситуативного диалога человека и робота рассматривают выбор момента для реплики как ключевую задачу; эксперименты с системами показывают, что инкрементная обработка может сократить паузы и позволить совершать действия раньше. Gervits et al., «It’s About Time: Turn-Entry Timing For Situated Human-Robot Dialogue»
Практичное решение — оставить голос для открытых указаний, а кнопку использовать для обозначения четких границ: нажать для записи, произнести команду, затем нажать, чтобы сохранить или сбросить результат. Это предлагаемый шаблон проектирования, а не заявленная функция какого-либо конкретного ИИ-продукта. Он снижает двусмысленность относительно того, когда начинается распознавание или заканчивается дубль, сохраняя при этом доступность разговорных запросов там, где они приносят пользу.
Почему расположение дисплея имеет значение?
Дисплей помогает, когда процесс имеет видимые состояния: последовательность шагов, слои на рисунке, варианты для сравнения или предварительный просмотр, который нужно принять или изменить. Его ценность зависит от того, видит ли пользователь результат непосредственно во время работы. Если дисплей смещен в сторону или закрыт рукой, пользователю, возможно, придется прервать жест, чтобы проверить, что произошло. Если же он доминирует в рабочей зоне, он может вытеснить материалы и физические элементы управления.
Для настольного устройства для творчества полезный критерий при проектировании — расположить дисплей так, чтобы пользователь мог бросить на него взгляд, не убирая рук с элементов управления или материалов. Показывайте важные изменения состояния — что выбрано, что записывается, что изменилось, — а не заставляйте пользователя делать выводы на основе голосового ответа. Эта рекомендация вытекает из цели осязаемых интерфейсов — связать физические действия с цифровой информацией; это дизайнерский вывод, а не строго измеренное правило об идеальных углах наклона или размерах экрана.
Что должна передавать тактильная отдача?
Тактильные сигналы — это осязаемые уведомления, такие как короткая вибрация или импульс, похожий на щелчок. Они могут подтверждать выбор или создавать ощущение, что регулятор перешел на следующее деление. Руководство Apple по интерфейсам рекомендует использовать тактильные эффекты последовательно, четко связывая каждое ощущение с вызвавшим его действием, сочетать осязание с другими видами обратной связи и избегать неоправданных или слишком частых эффектов. Также рекомендуется сделать тактильную отдачу опциональной. Apple Human Interface Guidelines: «Playing haptics»
В творческом процессе короткий импульс может подтвердить, что запись началась или что виртуальный регулятор переместился на новое деление. Он не должен заменять информацию, которую необходимо увидеть или услышать: по одной лишь вибрации может быть неясно, какая именно настройка изменилась. Полезная проверка — отключить тактильную отдачу. Если действие становится трудным для понимания, добавьте визуальный или звуковой сигнал. Если ничего важного не теряется, тактильный отклик, возможно, носит декоративный, а не функциональный характер.
Как простой осязаемый регулятор может поддержать творчество?
Осязаемый элемент управления работает лучше всего, когда его движение дает стабильный, видимый результат. Рассмотрим гипотетическое устройство для работы со звуком с одним поворотным регулятором и экраном. Пользователь поворачивает регулятор, чтобы изменить темп лупа, видит изменение значения на экране и слышит разницу. Короткий тактильный щелчок в нескольких значимых положениях мог бы отмечать шаги. Этот пример приведен для наглядности, а не как утверждение о протестированном продукте или измеренном результате.
Такая схема предлагает три формы обратной связи с четкими ролями: вращение — это ввод, дисплей показывает текущее состояние, а звук демонстрирует творческий результат. Тактильный отклик может подтвердить переход, но он не является главным. Если один и тот же регулятор непредсказуемо переключается между несвязанными задачами, физическую метафору становится труднее освоить; для уточнения активного режима может потребоваться нажатие или надпись на экране. Исследования овеществленных метафор в осязаемом взаимодействии также подчеркивают, что дизайнерам необходимо находить подходящее соответствие между действием и результатом и оценивать его вместе с пользователями. Antle et al., «Embodied metaphors in tangible interaction design»
Быстрый способ выбрать правильный интерфейс
Начните с действия, которое человек повторяет чаще всего, а затем спросите себя, какая обратная связь сделает это действие понятным. Используйте физическую кнопку для намеренной, дискретной команды; голос — для гибких запросов; дисплей — для видимого состояния или сравнения; осязаемый элемент управления — когда перемещение или расстановка чего-либо является частью творческой задачи; и тактильную отдачу — для краткого подтверждения, где осязание идет на пользу.
Простой прототип позволяет протестировать такую комбинацию без сложного оборудования. Разместите несколько подписанных кнопок рядом с экраном, настройте изменение одной настройки голосовой командой и представьте физический элемент в виде ползунка или поворотного регулятора. Понаблюдайте, сможет ли человек начать, изменить и завершить небольшую творческую задачу, понимая, что система услышала и что изменилось. Если физическое действие не добавляет ясности, контроля или удобства для исследования, возможно, ему не обязательно быть физическим. Если же добавляет, тактильная отдача может усилить это действие — однако физическое воплощение становится по-настоящему полезным благодаря всей совокупности элементов управления, их расположению, таймингу и отклику.
Практический вывод заключается в том, что тактильность — это один из полезных каналов, но не определяющий. ИИ-устройство ощущается по-настоящему овеществленным тогда, когда его физические элементы управления помогают человеку действовать, видеть, что изменилось, и продолжать творить с меньшим количеством пауз. Выбирайте тактильную отдачу для подтверждений, которым полезен осязаемый сигнал; выбирайте кнопки, удачно расположенный дисплей, голос или осязаемые регуляторы в соответствии с задачей, которую решает каждый из них.