苹果正式推出集成AppleIntelligence新框架和Siri Siri可以实时读取你屏幕信息并执行操作

苹果正式推出集成Siri和Apple Inteligence新框架:App Intents ，允许开发者在i0S 18.2+、mac0S 15.2+等平台上，让其应用的屏幕内容可被SIRI和Apple Intelligence 访问读取并执行相应的操作。
App Intents可以让开发者把应用的功能和内容更深地融入系统体验中，比如SIRI、Spotlight搜索、快捷指令(Shortcuts)和小组件(Widgets)。通过这个框架，用户能够更轻松地访问应用的核心功能，也可以更智能地帮助用户。
使用App Intents后，你的应用可以做到以下几点:
通过siri直接控制应用:用户可以对SIRI说”查找我的航班”或”添加待办事项”等命令，Siri 会直接与应用交互。
让应用内容出现在Spotlight搜索中:用户无需打开应用就可以在Spotlight搜索到内容，比如从笔记应用中找到某个笔记内容。
支持快捷指令和自动化操作:用户可以创建快捷指令，在特定情境下自动执行应用操作，
使用硬件按钮触发操作:支持用户通过iPhone或Apple Watch上的按钮直接启动特定功能。App Intents的基本组成部分：
1. App Intent(应用意图):定义应用中用户可以触发的具体操作，比如“打开文档””或“发送消息”。当用户通过Siri、快捷指令或Spotlight搜索时，这些意图可以被直接调用。
2.App Entity(应用实体):表示应用中的具体内容，比如照片、联系人或文件。通过定义App Entity,用户可以在Spotlight或Siri中搜索并访问这些内容。比如，一个食谱应用可以定义”食谱”实体，用户可以通过Siri搜索具体的菜谱。
3.App Enum(应用选项):用于定义一组选项，例如照片应用中的“相册分类”或任务管理应用中的“任务状态”。这样，Siri在识别用户请求时可以更好地理解内容的上下文,
使用快捷指令和自动化功能
App Intents允许用户通过快捷指令应用(Shortcuts)设置自动化操作。例如，用户可以创建一个“早上好”快捷指令，让Siri在早上自动打开新闻应用，显示当天的新闻。
支持硬件交互
App Intents还支持通过iPhone和Apple Watch上的物理按钮直接启动应用操作。例如，在iPhone的操作按钮或Apple Watch上，用户可以设置快捷方式，比如“一键打开相机“或”启动健身追踪”。