微软将Copilot人工智能与产业工人的混合现实相结合

　　微软计划将其Copilot生成式人工智能(genAI)助手集成到一款混合现实应用程序中，该应用程序可以为工厂技术人员提供指导，旨在减少管理和维护工业设备所需的时间。

　　在周三的Ignite大会上，微软宣布将把Copilot集成到Dynamics 365 Guides中。向导于2019年推出预览版，是一款用于全息透镜和移动设备的混合现实应用程序，它通过覆盖在物理对象上的图形(例如工人使用的工具和机器零件)向现场工人提供分步说明。

　　Copilot集成系统旨在为现场工作人员提供免提信息访问，帮助他们完成日常任务。

　　微软首席公关官弗兰克?肖(Frank Shaw)在Ignite活动前的一段预先录制的视频中表示:“Copilot和Microsoft Dynamics 365 Guides将生成式人工智能的强大功能与混合现实相结合，帮助一线员工更快地完成复杂任务并解决问题，同时减少对工作流程的干扰。”

　　Gartner研究副总裁Aly Pinder表示:“一线员工往往难以快速诊断资产/设备问题，并根据一系列工作指示解决问题。”“能够利用genAI的个性化见解，可以确保更多的一线员工成为服务需求点的专家。”

　　通过使用指南，工作人员将能够使用自然语言和身体手势与副驾驶进行交互-特别是通过观察和指向物理对象。例如，新员工可以简单地指向一个组件并询问它是做什么的或它是如何工作的，而不是依靠有经验的同事。然后，副驾驶将搜索文件以提供相关信息，梳理技术文档、服务记录和任何其他可用数据。最后，副驾驶通过叠加在物理设备上的混合现实“全息图”总结并呈现信息。

　　副驾驶的加入将使更多的对话互动成为可能。导航员通常依靠预先准备的说明来支持现场工作人员，但副驾驶的大型语言模型(llm)为与genAI助手进行更广泛的互动打开了大门。

　　“员工们可以进行渐进式的对话，比如，‘告诉我拆卸这个过滤装置的步骤’，或者‘我把马达断开了，下一步怎么办?’”微软在一篇博客文章中说。“Copilot利用客户精心策划的知识库跟踪流程和对话，通过语音、文本或3D全息图清晰地回答问题，消除了歧义，减少了返工的需要。”

　　微软还表示，Copilot将协助创建空间模型和3D内容——这通常是交付企业混合现实项目的挑战之一。

　　微软在宣布该功能的声明中表示:“使用客户定义的数据源，Copilot简化了混合现实内容的创建、管理和交付，使公司能够更快地采用混合现实。”

　　Pinder表示，随着高级员工退休，生成式人工智能的加入将有助于保留公司的知识库。他说:“随着劳动力的迅速老龄化和退休，对工具的需求正在增长，这些工具可以确保资历较浅的一线员工掌握(按需)知识，以解决问题，使组织能够扩大规模，以满足不断增长的服务需求。”

　　副驾驶在动态365指南是目前在私人预览。这项功能将首先在微软的HoloLens 2头显上实现，“晚些时候”才能在移动设备上使用。