让我们来介绍一下代理计算交互时代吧.
AI助手作为人格
虽然用户体验社区已经迅速接受大型语言模型作为设计工具,但我们尚未充分认识到它们的深远影响。随着AI代理融入我们的数字产品,我们面临着根本性的转变:这些系统正从工具演变成数字环境中的活跃参与者,我们需要为它们设计。
AI代理正作为一种新的用户类型出现,独立地在我们设计的界面上导航,并为我们执行各种复杂任务。这标志着一个新的互动时代的到来,即所谓的代理-计算机交互,其中不仅包括了人机互动体验,还包括AI代理的体验。
诚然,人类仍然在这个新的动态中扮演着不可或缺的角色,提供监督和指导。然而,现在应将AI代理视为独立的用户形象,每个都有自己的需求、能力和目标。这需要我们为人类和这些AI代理设计体验,设计适合双方的界面,并确保它们有足够运作的信息和资源。
人工智能代理:了解Google I/O 将 AI 代理定义为能够推理、前瞻几步并保留信息的智能体,同时在各种软件和系统中运行并接受人类监督。其他公司可能有不同的定义方式,但它们共享这一核心概念:能够前瞻几步并保留上下文,在独立工作时还能解决问题的 AI。就像有一个真正能预测你需求并主动为你解决问题的数字助手。
_(来自 Google I/O (谷歌开发者大会) 的图片),温馨提示,这些都是我个人的观点。
早期的AI代理仅依赖API与其他系统进行互动,而近期的突破,尤其是由Claude等模型引领的“计算机使用”方面的进展,开启了代理的新阶段。这些高级代理现在可以直接与图形用户界面互动,控制光标,输入内容,并在应用中导航,就像人类用户一样。这使它们能够以前所未有的自主性和复杂性访问基于浏览器的产品,并执行各种任务。
在这一新的时代里,AI团队必须在两种方式之间做出选择,让AI代理能够与软件互动。
- 直接API集成或‘工具使用’: 通过函数调用和API与系统进行程序化交互。这通常更高效,因为它避免了可视界面的渲染开销。但是,API的质量和覆盖率可能参差不齐。
- 通过图形用户界面交互或‘人工工具’: 让AI代理通过软件的图形用户界面进行交互,就像人类一样操作。虽然速度较慢,但这种方法更具透明度,使人类能更好地监控和控制AI的行为。
API集成可能最适合高流量、定义明确的任务,尤其是在速度和效率至关重要的情况下。对于需要仔细人工监督的任务来说,视觉界面交互可能更合适,能提供更多的透明度和控制权。UX从业者和跨职能团队面临的关键挑战是他们需要确定每个用例中最有效的交互方式,以及他们与最终用户之间的关系。
Anthropic的计算机用途
设计AI代理的用户体验随着AI代理逐渐成为我们数字产品中的活跃用户,UX设计师需要扩大他们的实践范围,以适应这些新的参与者。就像我们研究人类用户的需求一样,我们也需要了解他们的能力,他们需要什么才能有效运作,以及他们如何完成分配给他们的任务。
虽然代理最终是为满足人类的需求,但它们经常在复杂的网络中运作,在这些网络里,它们与其他代理互动以完成任务。例如,一个代理处理的数据可能被另一个代理用来做推荐,所有这些都是为了完成人类最初的请求。这产生了新的互动层面,设计师需要考虑并支持这些层面。
当我们为人类用户创建人物画像时,我们也应该为AI代理开发人物画像。这些人物画像应捕捉代理行为的细微差别、其优势和局限,以及其随着技术和环境的变化而不断发展的能力。这将使我们能够设计出优化代理的工作流程的界面和交互,就像它们只是普通的个体一样。
代理角色模板 — (修改版FigmaJam模版)
准备好迎接新的研究方法,比如通过A/B测试不同的界面设计来决定哪种设计最能提升代理的表现。虽然AI系统可能不具备意识,但它们拥有驱动力,并能够进行推理、规划和调整。
这个时代给我们提出了一个根本性的问题:人机界面应该是为人类优化,为智能代理优化,还是两者兼顾?这个问题的答案仍然难以捉摸,因为我们正在探索这片未知领域。关键在于认识到,AI智能代理不仅仅是工具,而是本身有需求的用户,需要周密的设计考量和对智能代理独特需求的深刻理解。
当移动设备进入桌面世界时,它最初被视作是桌面体验的缩水版。然而,我们很快发现了移动设备的独特潜力,它以一种难以预测的方式改变了世界,这超出了我们的预期。同样地,我们正通过现有的框架来审视人工智能的进步,时间将证明新的体验将以我们无法预料的方式形成。显然,我们似乎正从网页应用过渡到移动应用,而现在正迈向由智能代理驱动的未来。
塑造AI心智大型语言模型(LLMs)是AI代理程序背后的“大脑”,赋予它们智能和推理能力,使它们能够思考和决策。但UX设计师在塑造这些LLMs方面起着关键作用,不仅限于界面设计,还能影响代理行为的核心,从而影响代理行为的核心。
在《模型设计师的崛起》一文中,我论证了作为设计师,我们需要在桌旁占有一席,以便塑造AI模型。我们对用户需求和心智模型有独特的见解。这种专长对于制作有效提示,引导LLM达到预期结果至关重要。通过与工程师紧密合作,开发与用户意图匹配的系统提示语,这样可以确保AI系统提供的服务既相关又具有实际意义,更好地服务于人们。
AI模型的训练与来自“模型设计师”文章中的用户体验(UX)参与
此外,UX设计师应该积极参与制定评估代理性能的策略,并利用用户反馈来优化LLM的行为。这包括建立一个数据飞轮,持续提升代理理解和响应用户需求的能力。
关键是这样的:为AI代理设计需要一种思维转变。我们不仅是在为它们打造一个产品,而且我们正在积极塑造这些代理本身,通过精心的提示和持续的反馈来影响它们的智能和行为。这标志着用户体验的新领域,在这里,我们的专长现在延伸到了塑造AI的本质。
让人类始终参与其中在设计AI代理时,尽管这带来了令人兴奋的新挑战,我们绝不能忘记我们最终的目标:提升人类体验。AI应当服务于人类,我们的设计工作必须优先考虑人类的需求和价值观。
控制权最重要。UX从业者必须仔细考虑如何让用户掌握主动权,以控制其与AI的交互。这包括设计清晰的权限设置机制,说明数据访问的情况,并为那些不希望与AI代理互动的人提供不参与的选择。让用户掌握控制权来建立信任,对于成功采用由代理主导的体验至关重要。
透明度同样非常重要。用户需要明白AI如何使用数据和与工具互动,以及与其他AI的合作。在涉及多个来自不同公司的AI的场景中,用户应该能看到参与者,并选择允许进入其数字生态系统的实体。
幸运的是,我们可以在这个复杂领域中导航,利用现有的用户体验框架。系统设计提供了一系列有用的工具,帮助我们可视化代理驱动生态系统中的复杂关系,同时保持以人为中心的视角。通过适应服务设计中常用的蓝图等工具,我们能够映射技术,例如蓝图,有效地表示人、代理和产品之间的互动,突出可见性和控制的范围。
代理体验图草图(基于FigmaJam模板的修改版本)
这些修改过的蓝图,我们可以称之为“代理体验图”,不仅应该描绘交互流程,还应包含代理培训和评估的相关元素。这种全面的看法将帮助我们设计出既强大又值得信赖的系统,确保人工智能真正以人类为先。
结论部分我们正步入数字设计的新阶段,在这个新阶段,AI代理不再仅仅是系统内的工具,而是成为了活跃用户。这种转变要求用户体验设计师拓宽他们的视野,考虑人类和AI代理如何与界面互动,以及它们之间又是如何互动的。
虽然AI技术飞速发展可能让人感到手足无措,但AI领域仍处于起步阶段。用户体验设计的核心原则依然有用武之地——我们只是将这些原则扩展,涵盖人工用户和人类用户。这为设计师们提供了一个难得的机会,塑造AI代理如何与系统互动并满足人类需求。
用户体验的未来在于理解和设计这种代理与计算机的互动。现在掌握这一领域的人将有助于定义未来几年的最佳实践。
所以深吸一口气,报名参加一个课程,加入设计一个我们都引以为豪的未来的行动。
参考来源:- Anthropic — 介绍计算机使用
- NNg — 服务蓝图
- Latent Space播 — 语言代理:从思考到行动
- Cognition — 介绍Devin (介绍篇)
- MIT科技评论 — 谷歌的Astra是其首个全能AI代理
- Alex Klein — 代理体验时代的用户体验