Point and Yap

Point and Yap 是一款专为 Mac 用户打造的轻量级效率工具，让你通过最自然的方式——手指与语音——与 AI 编码代理进行交互。只需双击 Control 键，即可在屏幕上指向任意元素并同时说话，所有指向的内容和语音指令都会通过 MCP 协议实时发送给你的编码代理，彻底告别繁琐的键盘输入。

核心功能

• 双击 Control 唤醒：快速激活交互模式，无需切换窗口或点击图标。
• 指向即选中：鼠标指向屏幕上的任何 UI 元素、代码行或文本，工具自动捕获目标信息。
• 语音同步输入：一边指向一边说话，语音内容与指向对象自动关联，形成完整指令。
• MCP 协议集成：通过 Model Context Protocol 将指令无缝发送给支持的 AI 编码代理，如 Cursor、Claude 等。

主要特性

• 完全本地运行：所有数据处理均在本地完成，无需上传云端，保障隐私安全。
• 免费开源：代码完全公开，用户可自由修改、扩展或贡献代码。
• 极简设计：无复杂配置，安装即用，专注于提升交互效率。
• 精准上下文传递：不仅传递语音指令，还包含指向元素的屏幕坐标和语义信息，让 AI 代理更准确理解意图。

适用场景

• 快速代码审查：指向某行代码并说出修改意见，AI 代理直接执行。
• UI 调试：指向界面元素描述问题，代理快速定位并修复。
• 多任务操作：无需离开当前工作流，语音+指向即可完成复杂指令。

Point and Yap 重新定义了人机交互方式，让 AI 代理真正“看懂”你的屏幕、“听懂”你的需求。