拟物设计的核心感悟:拟物没有强制标准,你可以做复杂写实,也可以做极简轻量化,二者没有优劣之分。每一处添加的细节,都要能够对应现实世界的物理特性,画面才会真实可信。
兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

兰亭妙微ui设计公司分享:AI 体验设计的边界正在被重塑,从亚马逊 Go 的无感支付到自动驾驶的责任博弈,传统的交互逻辑已难以为继。本文基于人机交互与服务设计理论,提炼出五大维度设计原则,深度解析如何在黑箱算法与用户信任之间构建透明的桥梁。
当我和罗伯塔·塔西(Roberta Tassi)开始思考有助于指导 AI 体验设计的原则时,我们从唐·诺曼(Don Norman)的人机交互原则,以及埃琳娜·帕琴蒂(Elena Pacenti)在米兰理工大学攻读博士学位期间所制定的服务设计准则中汲取了灵感。

这些内容一直是我们工作的基本准则。例如,透明性原则几乎已成为每个服务提供商的必备要素,它对于让用户能够理解自身选择至关重要。但在 AI 的新环境下,这意味着什么呢?
我们开始探索这些原则,并确定影响基于 AI 的服务与体验设计的最关键变量。

有些变量是功能性的,用以界定人与技术组件及底层服务之间的交互。另一些变量则更多与审美价值相关。我们着重去理解那些能引发有意义问题、进而催生有趣设计的变量。

首先要考虑的一组原则,通常与可供性以及它们在基于 AI 的服务中如何变化相关:
1.可见性:这对于零交互/自动化服务尤为重要。我们需要设计 “负可供性”,向用户表明在新服务中,他们原有的一些交互模式可以摒弃,并指出新的交互模式是什么,即便我们希望新交互模式直观且无形。这有助于避免类似自动水龙头带来的那种困惑,因为传统交互方式在自动水龙头场景中被取消了。
2.心智模型:我们必须处理好用户针对像亚马逊 Go(Amazon Go)这类自动化服务所形成的心智模型。在这类服务中,我们要求用户摒弃旧有的服务使用模式。用户必须学会在进入时签到,而无需在离开时签出,这意味着一种全新的服务流程。我们必须考虑这一过程中的学习曲线以及所需的所有沟通环节。
3.透明性:鉴于机器学习的技术复杂性和黑箱问题,这或许是最具挑战性的原则。传统上,透明性意味着明确预期,或者让用户在等待时知晓正在发生什么(比如包裹追踪)。然而,我们现在必须考虑两个层面的透明性:其一,我们需要向用户更清晰地呈现技术限制。例如,用户需要明白 Echo 设备要么说话要么倾听,如果在 Alexa 还在说话时他们就开始发言,其询问可能无法被正确解读。其二,我们需要追踪 AI 可能代表用户采取的行动,并明确是哪些具体的用户输入或 AI 对其行为的解读导致了该行动。(例如,如果我的 AI 助手一直给我买巧克力,我想知道这是基于我的习惯、它对我心理状态的解读,还是供应商推送的促销活动。这就是所谓可解释 AI 应用的一个场景。)
4.可解释性:AI 的出现催生了一个重要的新原则。这既涉及用户理解系统中正在发生之事的能力,也关乎AI所采取行动的可问责性。它与 “让用户深入了解系统运作机制” 的理念相关。目前有朝着可解释 AI(XAI)方向的尝试,这应该遵循这一原则。

第二组原则涉及用户应如何在不同方面保持对系统的控制权:
1.退出自由:在传统系统中,这指的是随时停止交互的能力,比如我改变主意时能从 ATM 机取回银行卡。然而,随着谷歌、亚马逊这类更复杂系统的出现,理解用户的退出自由究竟意味着什么变得至关重要,特别是在如何安全取回他们的数据方面。
2.容错友好性:在传统系统中,容错友好性意味着允许人工操作者犯错而不引发严重问题。但对于智能代理而言,我们可能需要设计这样的系统:确保用户能接受一定程度的系统故障,并明确用户与 AI 代理之间责任如何划分。最近,自动驾驶汽车中多起涉及自动驾驶仪的事故使得这一原则问题尤为突出。
3.持续参与:关键在于考虑如何让用户知晓情况,并赋予他们干预和重新引导系统的能力,还要设计出能提供清晰及时反馈以实现这一点的系统。用户必须明白何时可能需要重新接管控制权,并且应为他们有效执行这一操作创造条件(例如,在自动驾驶汽车场景中,由于机器在控制,用户常常会感到无聊和分心)。这不仅对控制 AI 很重要,对人类保持自身技能和知识水平、以便在技术故障时仍能手动执行操作也很关键。

第三组原则与适应性以及这些服务如何应对不同情况相关:
1.学习能力:从用户反馈中学习并随时间不断改进的 AI 服务,是这项技术的自然产物。它们能够实现个性化体验,适配用户的需求和偏好。这一特性是许多成功的基于 AI 服务的关键要素。
2.灵活性:这是设计 AI 服务的一项关键原则,它使系统能够随时间推移进行适应和演变。这包括整合新数据和用户反馈的能力,以及响应不断变化的用户需求和偏好的能力。一个灵活的 AI 系统还能更好地处理意外情况和异常状况,提供更流畅、直观的用户体验。总体而言,以灵活性为导向进行设计,能让 AI 服务持续改进,在不断变化的环境中保持相关性。
3.多模态交互:该原则指的是为用户提供多种交互方式,如语音、文本和手势识别,还包括结合不同交互方式以实现更流畅的体验。通过提供多种交互方式,AI 服务能更好地满足用户偏好,并适应不同的使用场景,使整体体验更具灵活性和易用性。
4.情境感知:对于设计能有效适应不同情境的 AI 服务而言,这是一项至关重要的新原则。例如,用户在工作或从事其他专注活动时,可能不希望被打扰。AI 服务应设计为能够检测并响应这些情境,提供适应特定情况的差异化体验,而非采用一刀切的方式。挑战在于打造能够识别并适应用户情境的服务,提供流畅且个性化的体验。
···
接下来谈谈与美学相关的原则,我们可以思考能提升体验的元素。

一致性:
第四组原则更多涉及服务在美学和情感方面,也与品牌体验和认知相关。
1.共享且一致的语言:这既体现在服务与用户之间共享的语言,也包括契合情境的语言(不能是用户听不懂的官僚或技术语言的 AI )。服务语言在用户访问的各种平台和情境中也应保持共享且一致。
2.共享价值观:这对用户与服务的匹配至关重要。此前我们在一定程度上看到过例子,比如当前的地图应用重视效率和速度,而用户可能更看重路线体验。我们需要找到传达这些价值观或适配用户的方式。
3.可及性:AI 服务看似可及性问题较少,因为自然语言界面可能克服操作按钮和触摸屏的一些限制。然而,我们已经看到不同语言的服务在可及性方面存在显著差异。另一个方面是对不断增加的带宽和处理能力的需求,这可能在有能力使用高质量 AI 服务和无力承担的人群之间造成新的数字鸿沟。
4.伦理道德:这是一个宽泛的范畴,不止涉及单一原则,目前在技术和设计背景下都有讨论。设计师应考虑将道德准则融入 AI 服务的功能中,并评估该技术潜在的伦理影响。他们必须留意服务对社会的潜在影响,确保其符合伦理价值观和原则。然而,在某些情况下,这些伦理方面可能与一致性原则相悖,因为一些伦理考量可能高度基于具体情境,需要兼顾多样性和差异。

第五组原则旨在帮助人们在使用 AI 服务时感到自在,并且感受到被尊重,从而营造舒适的 AI 体验。
1.外观、特性与氛围:这些元素通过品牌形象视觉化、色彩和声音等接触点来传达服务的核心。对于常常超越屏幕交互的 AI 体验而言,理解如何持续传递品牌价值,以及像语气或特性等其他方面怎样用于打造不同且独特的体验,这一点至关重要。
2.个性化:这是将智能融入服务所带来的最大优势之一,但它引发了关于个性化程度的疑问。传统上,服务和品牌的创建会考虑特定价值观和目标受众,但个性化可能会挑战这一模式,使服务适配每个特定用户的偏好。例如,是否仍需要多种打车服务,还是一个统一整合的平台就能提供足够的个性化服务以满足每个人的个体需求?品牌及其价值观的概念会被每个用户的价值观和需求所取代吗?
3.谨慎性:虽然 AI 利用用户行为数据实现个性化体验有益处,但谨慎行事很重要,不能让用户感到尴尬或不适。AI 应融入用户偏好的做事方式,避免造成尴尬局面。例如,如果 AI 收集了大量用户数据,它应利用这些信息提升用户体验,同时尊重用户隐私。设计师在利用数据支持服务行动时,应思考如何融入惊喜元素和自然交互,不让用户感到不适或隐私被侵犯。
总之,AI 体验的设计原则复杂且多面,融合了传统服务设计、伦理道德和美学等方面的元素。随着 AI 越来越融入我们的日常生活,设计师必须考虑这些原则,打造不仅功能实用、高效,而且能让用户享受其中,并尊重用户价值观和偏好的服务。
转载:人人都是产品经理
兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。


兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

转载:优设
兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

转载:优设
兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

转载:优设
兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

兰亭妙微ui设计公司分享:最近把手机里所有带AI助手的APP都试了一遍,包括支付宝的蚂小财、蚁小保,滴滴打车助手小滴,招商银行的AI理财顾问、飞猪千问定车票等等。
各赛道都在抢着把AI能力塞进自己的产品。
试完之后的感受挺微妙的,大部分AI助手就用过一两次就不再打开了。
坦率的讲,不是这些AI不够聪明。底层模型的能力虽然有差距,但回答问题的水平都已经在可用线以上了。真正拉开差距的是交互设计,就是用户打开你的AI助手之后,整个体验是怎么串起来的。
AI产品的交互设计跟传统APP完全不同。传统交互设计解决的是怎么操作,AI交互设计要解决的是怎么表达意图和怎么建立信任。
行业里目前有两套被广泛引用的设计框架,一套解决前者,一套解决后者。
所以无论是产品经理还是设计师,都应该先掌握AI产品的设计特性,然后针对性的进行自己内部产品的AI升级,而不是看着大家都整小助手,就赶忙上线一个小助手,但用起来根本啥也不是。
你的AI助手能力如何,用户感受如何,下面通过五大领域+六大模式来自查下你的助手吧~
这套框架来自Smashing Magazine 的 AI 界面设计研究,把AI交互拆分成五个功能模块,下面来简单说明一下。

用户怎么把想法传达给AI。这是AI交互的第一步,也是最难的步骤,因为用户的意图往往是模糊的,且需求的来源本身就是把多样。
核心设计要点:提供多种表达通道,如文字输入、语音输入、拍照识别、视频对话等,让用户自己选择使用最顺手的方式。
比如支付宝/豆包等:语音+图片+文本多模态输入,用户可以直接拍一张图问这是什么,不用打字描述,降低了表达门槛。
用户把想法告诉AI了,接下来就是AI怎么把结果交出来,AI生成的结果怎么呈现。不同于传统APP的固定页面,AI的输出是动态的、多维度的,是将最佳可读性的结果呈现给用户。
核心设计要点:结果展示必须可读、可比较、可评估。用户第一眼要能判断靠不靠谱。
比如在设计的时候不要长短大论的文字给到客户,一定是结构化,图文并行的给到客户,比如千问、可灵从开始大大篇报告逐渐给出结构化输出。
AI回答自动拆分为大纲、要点、表格、各种曲线图折线图等多种形式,用户不用自己从一大段文字里提取信息。
AI给的初始结果通常是80分,用户需要微调到95分。这是体验的关键分水岭。
核心设计要点:微调必须即时反馈、所见即所得。操作粒度合适,优先用预设降低决策成本。
AI从给建议升级为替你做。帮你看是一回事,帮你操作是另一回事,信任门槛完全不同。
核心设计要点:执行类操作必须配上确认机制,让用户随时能看到AI将要做什么。
比如AI在工作时,都会告诉你他正在干什么执行到哪一步了,让用户放心,帮你办理业务时,或者在帮你打车时,一定是将执行前的确认交给用户。
AI能力嵌入到用户已有的工具和工作流中,而不是让用户跳到另一个APP去用AI。
核心设计要点:AI的出现时机和位置必须自然,与已有工具的数据和操作必须打通。
比如你用千问集成了各类的能力,不用点外卖去闪购、买票去飞猪,只需要在千问你告诉他帮我下单即可,这样用户对AI助手的依赖就会增强,不会再去点击传统的入口。
以上框架讲的五个功能模块。你可以理解为,一个完整的AI助手,这五个模块的设计都得到位。少了任何一个,体验就会在那个环节断掉。
但这还不够。
你把功能模块都设计好了,用户凭什么相信你的AI?凭什么让AI替自己做事?
这就是第二套框架要解决的问题。
我自己的观察是,大部分AI助手在信任这块做得都比较粗。要么就是什么都不解释直接给你结果,要么就是一股脑把操作都做了也不提前说一声。用户用着用着就慌了,不知道AI在干什么、为什么这么干、干错了、怎么办。
做得好的AI助手是怎么处理信任的呢,主要关注六个设计模式。
六个模式的核心让用户信任AI的六个设计开关,把控制权交还给用户。AI可以执行,但用户必须能预览、能确认、能理解、能质疑、能撤回、能干预。
这套框架来自行业智能体UX模式研究,专门解决一个问题——当AI替用户做事时,怎么让用户信任它、控制它、纠正它。

比如,小滴我告诉他帮我叫一辆回家的车,他会实时展示他当前思考进度,然后跑完结果后给出我确认的地址和时间,然后在帮我匹配对应的车辆,这样用户对他的行为一目了然;
还有一些操作更类B端工具,如Claude Code 每次任务之前会先列一个清单,要澄清哪些需求,改动哪些文件、每个文件改什么内容,你确认了它才开始,完全放心的交给AI。
基础C端客户层面,可释放给用户可选择的模式,如基础快速和深度思考、如一个功能独立的快捷入口和分步的引导入口,便于用户自主灵活的选择;对于B端的工具,在辅助自我工作上,可以更灵活的调整AI介入的程度,更好的AI为我所用。
一是AI做完后告诉用户为什么,展示AI思考的链路;
二是其中变量的解释,如通过上下文的解释,或者持续的告知和引导;
三是自我批判解释,需帮助用户评估其可靠性,如自我批判(如“此信号可能因某某因素而被夸大”),或提供其他角度的回答,来引导用户自主做出判断。
特别是一些资金基金财富保险类的助手,其严谨性和解释性要更加明确。
AI不确定时老实告诉用户,核心原则:不确定性必须可见,不能藏在看似自信的输出背后。
当用户问到具体办理或查询的事件时,遇到不确定的问题直接说我不太确定,这个信息我无法验证,不会编造答案。
还有就是使用简单、可见的指标,如百分比或低/中/高等级,来标示结果的置信度。
对于文本内容,可以在视觉上高亮不确定的部分。
完整操作记录+ 一键撤销。设计目标:撤销率 < 5%。
支持用户查看以往的对话记录,让用户的记录有迹可循,可追溯之前的咨询信息;
AI不确定时主动求助用户。设计目标:恢复成功率 > 90%。
回到开头那个问题,大部分AI助手为什么做得不到位?
因为它们要么缺模块,五个功能模块没有全覆盖,用户在某个环节卡住了就放弃了;要么缺信任,六个信任模式没有做到位,用户不敢让AI做重要的事,要么两个都缺。
拿到一个AI助手的设计需求,怎么落地呢,三步走。就像机长在起飞前会严格的自查所有系统是否准备齐全,才会起飞,必要的限制,是对产品和用户负责。

第一步,拿五大领域当模块地图过一遍。你的AI助手在表达意图、展示结果、微调输出、执行任务、场景融合这五个环节,每个环节的交互形态想清楚了吗?有没有哪个环节是缺失的?
第二步,拿六大模式当信任自查清单过一遍。坦率的讲,意图预览和撤销是最低要求,几乎所有涉及AI执行的功能都应该配上。自主度和可解释性根据功能复杂度决定。置信度信号和升级路径在信息不确定的场景下必须具备。
第三步,把缺失的补上。不是每个功能都要六个模式全覆盖,但每一个被省掉的模式都应该有明确的理由,而不是没想到。
所以在设计时,传统产品,产品/设计的产出是一套界面操作流程。AI产品,产出是一套行为规则,AI在什么时机、以什么方式、展现什么信息、留给用户什么控制权。这些东西才是负责AI项目的人真正要决定的事情。
转载:人人都是产品经理
兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

兰亭妙微ui设计公司分享:继上一篇我们提出了 HAI 交互设计法,并通过「深度理解」锚定了人性不变的需求后。本次,我们将视角转向技术演进所带来的交互变革,以「自然交流」的设计顺应技术之变。
AI 从大语言模型向多模态模型、乃至世界模型演进,其本质是理解能力的维度扩展:从符号语义解析,延伸至物理情境理解。这一质变使机器能够真正读懂人的意图、感知当下情境,为人机交互从“人适应机器”转向“机器适应人”奠定了基础。
在此趋势下,人机互动从屏幕走向空间,从单一通道走向多模态自然协同。面对这一变化,本文回归人类原生交流规律,系统构建多模态交互设计体系,通过分析其特征、类型与方法,为 HAI 时代的人机交互提供思考框架与理论参照。

从纸张文字、电话语音到移动互联网的影像,每一次媒介形态的跃迁,都深刻重塑着我们理解世界的维度与感知的边界。
而今,在 AI、空间计算与 XR 等前沿技术的融合推动下,数字世界与物理世界的边界正逐步消融。虚实融合不再仅是愿景,而是正在成为新一代信息社会的底层体验范式。这一趋势不仅深刻变革着人类获取信息与沟通交互的方式,更驱动数字智能本身持续进化——它正突破虚拟的边界,向可感知、可交互、乃至可栖居的具身化智能方向演进。
从平面到空间的演进,也标志着交互范式本身的重构。过去数十年间,人机交互始终被禁锢于二维屏幕之内,依赖于键盘、鼠标、触控等单一模态的输入方式。而未来,随着智能传感、空间计算与多模态 AI 的成熟,交互将快速跨越屏幕的边界,迈向三维空间与自然融合的多模态交互方向。
人类以多模态的方式互动,世界以多模态的结构呈现。人类所创造的多模态技术,正是根植于这一双重现实为基础而发展。
生物学层面上,多模态互动(Multimodal Interaction)是一个完整的“传递‑接收”循环:指人体通过多种运动/效应通道(Motor/Effector Channels)传递信息,并通过多种感官通道(Sensory Channels)接收信息。正如人类在交流中同时扮演“表达者”与“倾听者”。
多模态交互正是这一生物机制的数字化延伸,它融合多种“表达”与“感知”方式,使人机互动不断逼近人际交流的自然体验。
多模态交互:指人类利用多种表达通道(如肢体、声音语言、眼神)和感知通道(如听觉、视觉、触觉)与计算机系统进行通信的过程。
—— 本·施奈德曼(Ben Shneiderman)

多模态交互首次在1979年麻省理工理查德·A·博尔特(Richard A. Bolt)撰写“Put-that-there: voice and gesture at the graphics interface”(将语音和手势结合)。
综上所述,人类通过“多通道输入”传递意图,系统通过“多通道反馈”回应结果让人类感知,从而形成一个实时、连贯的交互闭环。因此,多模态交互的本质并非模态的简单叠加,而是构建一个以人为中心的对话循环。
为深入剖析这一循环,本文将分两篇展开系统性阐述:上篇聚焦多模态输入(人类如何表达),下篇探讨多模态反馈(系统如何回应)。

前文中所提到的多模态表达是从生物学角度切入,指人体通过多种运动/效应通道(Motor/Effector Channels)传递信息。

而多模态输入根据用户参与程度又可分为两类:显性输入与隐性输入。
随着 AI 理解能力的深化,系统正逐步融合显性与隐性信号。但当前交互设计的核心仍是优化显性输入——它是用户意图最直接的出口。下文将围绕这一焦点,阐述基于主动表达的多模态输入设计方法。
设计多模态输入前,采用系统化的分析框架,基于人机交互领域中的 “意图‑行为‑情境”分析思路,将动机、体验与变化纳入考量。对应的是 设计动机(Why)→设计体验(How)→适应变化(What if) 该框架依次引导设计者回应以下三个核心问题:

后续,将依此三阶段展开说明:
1. 设计动机:单模态是否满足,多模态输入优势是什么?
【动机:多模态的必要性】
我们想象一个日常沟通场景:“与熟人对话时,我们通常会简洁地表述,乃至含糊省略;而与陌生人对话时,则会表述得更明确,更丰富”。其实这揭示了一个本能倾向,人在确保意图能被准确传递的前提下,会倾向使用最“经济”的表达方式。
这正是关于多模态输入的必要性思考,其核心是遵循 “奥卡姆剃刀”原则:如无必要,勿增实体。若单一模态已能轻松、准确的完成任务,就无需引入更多模态。
因此,判断多模态输入的必要性,首先需要审视单模态是否存在阻碍或瓶颈。多模态设计的价值必须明确,关键在于创造增量体验,而非简单叠加,其必要性可从提升“效率、准确、流畅”三个维度进行审视与评估。

1)效率性(简化复杂任务):该任务是否因操作逻辑复杂,导致单模态表达低效甚至无法完成?
说明:在传统汽车HMI中调节后视镜需依循界面,多步骤操作。智能座舱则允许用户看向目标后视镜+手部操作,将多步操作融合为一步自然动作,实现“所见即所控”。
2)准确性(提升意图准确性):单模态输入是否容易产生歧义或错误,需要其他通道进行确认或补充?
说明:支付等高安全性操作,若仅依赖单一验证,仍存在误识风险。结合人脸识别与按压指纹验证,可大幅提升交易可信度。
3)流畅性(增强输入流畅性):判断当前交互流程是否存在明显的操作断点,是否可通过多模态实现更流畅连续的交互?
说明:键盘打字虽成熟可靠,但行走移动时仍会打断输入,而“长按语音输入、松开转文字”则允许用户在不中断当前活动的情况下持续输入。
综上所述,多模态的必要性,取决于它能否提升单模态在效率、准确或流畅性上的增量体验?若能,则引入具备明确价值;若不能,则应力求简洁,避免过度设计。应始终基于用户是否需要,而非技术是否能够。
2. 体验设计:多模态输入是否自然协调?
【动机:多模态的协调性】
构建自然协调的多模态输入体验,这要求设计兼顾人体的共性规律与个体的差异偏好。

在共性层面,须符合人体行为的客观规律,确保模态资源得到合理编排,否则会引发冲突与疲劳。
在差异层面,须贴合个体不同的偏好方式,使模态方式是契合个人偏好,否则会显得僵化且笨拙。
因此,协调性的实现,具体落实在这两项的设计任务上:
模态的资源合理编排(共性)
克里斯托弗·威肯斯(Christopher Wickens)的多重资源理论(MRT)为此提供了核心依据:人类的认知与动作资源并非单一整体,而是分布于多个相对独立的“资源池”。用以解释为什么有些任务更容易同时完成(例如边走路边嚼口香糖),而另一些任务则难得多(例如边说话边用眼阅读)。

威肯斯多元资源理论模型图形,方块表述人类的不同资源池,由HFE Solutions的KT Smith绘制。
基于此理论,合理编排的目标在于实现动作资源有效分配,让交互感觉轻松、自然。我们可从表达资源的数量、难度、重叠使用这三个设计要点上:
1)模态组合数量:模态越多(1→N),需调用的资源池越多,协调难度与消耗越大。
说明:调用的资源数量增多,也会造成相互之间的配合难度上升,非特殊情况,尽量克制在 2-3 种内。
2)模态行为难度:输入动作精度要求越高(模糊→精细),资源消耗会增大。
说明:一个需要高精度定位的“精细手势”远比一个自然的“挥手”消耗更多资源,设计应遵循最小努力原则,将高频、连续操作分配给低难度模态。
3)模态调用重叠资源:若多个模态竞争同一资源池(如同时进行两项触控任务),会产生干扰。
说明:如要求用户同时执行“触摸打字”和“触摸控制”两项任务,会较难完成,应优先选择资源互补的模态。
因此,设计中,不应只考虑提供尽可能多的输入方式。而是需要思考,将用户有限的资源,配置在最值得、最不费力、且互不冲突的地方,从而降低用户负担。这一理念落实到具体的行为动作设计上,体现为上述的三项设计准则,对此做个小结:

数量克制,组合控制在 2-3 种模态内;难度适配,最大程度降低高频操作的动作精度;资源互补,优先组合调用不同通道的模态(如“语音+视线”),避免竞争同一资源池(如多重触控)。
模态的方式贴合个人(差异)
合理的模态资源编排建立了客观、普适的效率基线。而真正的自然协调还需根据个体差异进行适配,需兼容具有不同生理条件、文化背景与行为习惯的用户,因为并不存在“标准人”,故设计必须尊重用户的“多样性”。

1)贴合个人生理特征:用户的生理能力存在客观差异,设计应提供合适且具有包容性的交互通道。
说明:如儿童手部能力尚在发育,面向该群体的智能手表普遍采用更大的热区,并多采用长按的操作方式,避免精细点按。
2)贴合个人文化习俗:同一行为在不同文化中可能语义迥异,设计应契合文化特征并避免歧义。
说明:以“OK”手势为例,在中国表示认可,在土耳其、希腊等地则具有侮辱性含义。系统需识别此类文化差异,确保交互意图准确传达。
3)贴合个人习惯偏好:不同用户的使用习惯存在显著差异,设计应支持个性化配置并主动适配差异。
说明:如 Apple Pencil 在设计时,便兼顾了惯用左右手的两类用户不同的持笔握姿与手掌落点,为不同习惯的用户提供一致的顺滑书写体验。
某种多模态组合,对一个人来说是直觉,对另一个人来说却可能成为障碍。因此,模态方式的“贴合个人”,是让模态主动适配不同用户的生理条件、文化习俗与习惯偏好,为每个人提供最自然、最有效的表达路径。

最后,为多模态输入协调性做一小结,其构建路径可概括为 “模态的资源合理编排 → 模态的方式贴合个人” 。前者建立普适的效率基线,解决“可用性”问题;后者则针对个体差异进行适配,解决“契合性”的问题。二者共同推动交互设计从标准化的效率,走向因人而异的协调。

3. 适应变化:输入的情境是否多变?
【动机:多模态的适应性】
前文中,多模态输入的协调性,是为交互体验建立了相对稳定的静态基础。然而,真实的互动场景始终处于动态流动之中。

想象一个日常情景:从安静书店步入喧闹地铁站时,我们会不自觉地提高音量、增加手势以保持沟通。
人类天生懂得根据环境、状态与任务动态调整“输出”方式。这一本能揭示出人机交互的关键原则:有效的沟通需要根据环境、自身状态和任务状态的变化动态调整输出方式。
基于这一洞察,用户输入应具备“动态适应性”,能主动感知情境变化,智能调度最适宜的输入通道。具体而言,这种适应性体现在三个关键维度:

1)适应环境条件变化:依据环境变化所带来的影响,提供最优输入通道。
说明:如手表进入到游泳模式因物理环境发生改变,会关闭触摸通道,输入通道以物理旋钮与实体按键为主。
2)适应用户状态变化:识别用户实时行为与注意力水平,匹配输入方式。
说明:在驾驶场景中,为减少分神,车机系统会优先推荐语音指令或方向盘上的实体按键输入,而非触控屏幕输入。
3)适应任务状态变化:理解任务不同阶段的核心目标,提供契合的输入支持。
说明:在紧急事件中,系统将跳过复杂操作,直接提供极简交互,如支持挥手、点头等本能输入方式,以最短路径完成关键确认。
有效的沟通,从来不是用固定的方式应对流动的世界。因此,多模态输入的适应性,本质是让系统具备与人类同等的情境应变能力。为不同环境、状态与任务阶段,预判并匹配最适宜的输入通道。如果说协调性中的“资源编排”确立了效率基线、“贴合个人”实现了因人适配,那么“动态适应”则确保了交互在每一次当下发生时的合理性。
至此,我们完成了对多模态输入设计的系统探讨。在基于 AI 推动“机器不断适应人”的背景下,了解交互正从平面走向空间、从单模态走向多模态。能观察到,交互是向着顺应人类本能,契合人类直觉的方向发展。而多模态输入,则对应的是人类的表达本能,其最终目的:最大程度承接人类的自然表达。
本文基于人类自然表达的“意图‑行为‑情境”为原型,将其转化为设计思考的 “动机—体验—适应” 框架,系统回应了多模态输入的三个根本问题:

设计动机:为何需要多模态?- 解决效率、准确、流畅的瓶颈;设计体验:如何实现自然协调?- 模态资源合理编排,模态资源贴合个人;适应变化:怎样应对变化?- 动态调度输入通道,适配环境、个人与任务状态;
未来,随着 AI 感知与情境理解能力的进化,多模态交互将超越界面,成为人与世界无缝衔接的交流方式。它以轻量行为承载深远意图,在虚实融合中重新定义交流的边界——表达的极简,源于极致的理解。
转载:人人都是产品经理
兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

兰亭妙微(蓝蓝设计)www.lanlanwork.com 是一家专注而深入的界面设计公司,为期望卓越的国内外企业提供卓越的大数据可视化界面设计、B端界面设计、桌面端界面设计、APP界面设计、图标定制、用户体验设计、交互设计、UI咨询、高端网站设计、平面设计,以及相关的软件开发服务,咨询电话:01063334945。

蓝蓝设计的小编 http://www.lanlanwork.com