PointMe--AR眼镜全智能办公助手 PointMeI. 产品介绍PointMe 是一套面向办公场景的 AR 眼镜智能辅助系统。它连接电脑屏幕内容、用户语音指令与 AR 眼镜显示让用户在不离开当前工作界面的情况下快速理解邮件、消息、PPT 和财务报表。用户只需在电脑上选中内容并通过眼镜提问“这封邮件在说什么”“我应该怎么回复”“这一页 PPT 应该怎么讲”“这份财务报表有什么问题”PointMe 会获取选中的内容结合当前应用和语音意图进行分析再将经过筛选的核心信息显示在 AR 眼镜中。电脑负责呈现完整内容AR 眼镜负责提供即时、简洁、低干扰的提示。Point it. Ask it. Get it.II. 核心场景1. 邮件理解与回复用户选中邮件后可以询问“对方想让我做什么”“这封邮件需要回复吗”“帮我生成一个专业回复。”PointMe 会提取邮件中的核心诉求、重要信息和潜在风险并在眼镜中显示简短结论。完整回复内容则保留在电脑端方便用户检查和编辑。2. 消息理解与回答用户可以选择聊天软件中的消息让 PointMe 判断对方的意图并生成合适的回复建议。系统会过滤重复表达、无关内容和低价值信息只保留用户真正需要关注的部分。例如对方的核心问题用户需要回应的事项建议回复的主要态度。3. PPT 演示辅助在汇报过程中PointMe 根据当前 PPT 页面在 AR 眼镜中显示当前页面的核心观点推荐的讲述顺序需要强调的数据页面之间的过渡表达听众可能提出的问题。提示仅对佩戴者可见使 AR 眼镜成为演讲过程中的隐形提词器和内容助手。4. 财务报表阅读用户可以选择资产负债表、利润表、现金流量表或其他业务报表并询问“这份报表说明了什么”“哪些数据值得注意”“这里可能有什么风险”PointMe 会识别关键指标、异常变化和重要趋势并将最有价值的结论显示在眼镜中帮助用户快速理解复杂财务信息。III. 核心功能1. 屏幕内容获取PointMe 支持获取用户主动选中的邮件正文聊天消息PPT 页面财务报表剪贴板文字或截图当前应用和窗口信息。系统只处理用户主动选择的内容不进行持续录屏。2. 语音交互用户通过 AR 眼镜直接提问无需重新输入背景信息。系统会将语音指令与屏幕内容组合判断用户是在请求解释、总结、回复、演讲提示还是财务分析。3. 信息过滤PointMe 不会将完整的 AI 回答直接堆叠在眼镜中。系统会过滤无关内容、重复信息和低价值表达只保留一句核心结论最多三个关键点必要的回复或讲述提示。详细内容仍然显示在电脑端。4. AR 信息卡片不同任务会生成不同的 AR 卡片邮件摘要卡消息回复卡PPT 演讲卡财务分析卡风险提示卡。卡片以短文本形式呈现在用户视野中避免遮挡工作内容或干扰正常办公。5. MCP 服务连接PointMe 通过 MCP Server 连接电脑端应用、企业数据和 AI 服务。MCP Server 负责接收用户选中的内容调用相应的分析能力并将结构化结果返回电脑端与 AR 眼镜。企业也可以通过 MCP 接入内部邮件规则、财务数据、知识库和内容规范使 PointMe 的回答符合企业实际业务环境。IV. 技术架构PointMe 主要由以下部分组成电脑端客户端负责获取用户主动选择的邮件、消息、PPT 页面和财务报表并提供当前应用环境。AR 眼镜端--百宝箱workflow负责接收用户语音、显示信息卡片并支持继续追问或切换提示内容。多模态模型理解屏幕截图、文字、表格、PPT 页面和财务报表。Agent 与 MCP Server根据用户意图调用邮件分析、回复生成、PPT 讲述和财务报表阅读等能力并控制结果输出结构。信息过滤模块将复杂分析压缩为适合 AR 眼镜阅读的简短结论。V. 产品价值PointMe 的重点不是把聊天机器人放进眼镜而是发挥 AR 眼镜在办公场景中的原生价值。用户可以保持视线和工作状态不需要频繁切换窗口、复制内容或低头查看其他设备。在阅读邮件和消息时眼镜帮助用户快速理解和回复。在 PPT 汇报时眼镜提供只有演讲者可见的讲述提示。在阅读财务报表时眼镜突出关键数据、异常趋势和潜在风险。电脑屏幕承载完整工作内容鼠标负责指定对象语音负责表达问题AI 负责分析AR 眼镜负责即时反馈。PointMe 将 AR 眼镜从单纯的信息显示设备转变为与电脑办公流程深度结合的实时认知辅助工具。VI. 面向无显示屏 AI 眼镜的 Agent 改造PointMe 同样支持没有显示屏、主要依赖麦克风与扬声器交互的 AI 眼镜。在无显示屏设备上Agent 不再生成视觉信息卡片而是将分析结果转换为简短、可打断、可继续追问的语音反馈。1. 从视觉卡片转向语音信息单元Agent 会将结果压缩为适合听觉接收的结构先给出一句核心结论再播报最多三个关键点复杂内容默认不完整朗读用户可以通过“继续”“展开第二点”“直接告诉我怎么回复”等指令获取更多信息。例如用户选中一封邮件并询问“他想让我做什么”眼镜可以直接回答“对方希望你在周五前确认报价。目前最重要的是核对价格和交付时间。”2. 信息优先级判断无显示屏场景无法让用户快速扫视大量信息因此 Agent 需要更严格地判断哪些内容值得立即播报。系统会优先输出用户需要执行的事项截止时间和关键数字邮件或消息中的真实诉求PPT 当前页面的讲述重点财务报表中的异常变化与风险。重复内容、背景描述和低价值信息会被自动过滤。3. 对话式任务控制用户可以通过连续语音完成任务而不需要查看操作界面。例如“总结这封邮件。”“帮我回复。”“语气更正式。”“读给我听。”“复制到电脑。”Agent 会保持当前任务上下文理解后续指令针对的是同一封邮件、同一页 PPT 或同一份财务报表。4. Agent 输出模式适配Agent 会根据设备能力自动选择输出方式。对于有显示屏的 AI 眼镜系统生成简短的信息卡片对于无显示屏的 AI 眼镜系统生成结构化语音摘要对于电脑端系统保留完整分析、回复文本和财务数据说明。同一个任务只需要执行一次分析即可生成适合不同终端的输出结果。PointMe让办公信息被直接指向、快速理解并以最合适的方式呈现在眼前。