苹果正式推出集成AppleIntelligence新框架和Siri Siri可以实时读取你屏幕信息并执行操作

文章4周前更新 admin
31 0

苹果正式推出集成Siri和Apple Inteligence新框架:App Intents ,允许开发者在i0S 18.2+、mac0S 15.2+等平台上,让其应用的屏幕内容可被SIRI和Apple Intelligence 访问读取并执行相应的操作。
App Intents可以让开发者把应用的功能和内容更深地融入系统体验中,比如SIRISpotlight搜索、快捷指令(Shortcuts)和小组件(Widgets)。通过这个框架,用户能够更轻松地访问应用的核心功能,也可以更智能地帮助用户。
使用App Intents后,你的应用可以做到以下几点:
通过siri直接控制应用:用户可以对SIRI说”查找我的航班”或”添加待办事项”等命令,Siri 会直接与应用交互。
让应用内容出现在Spotlight搜索中:用户无需打开应用就可以在Spotlight搜索到内容,比如从笔记应用中找到某个笔记内容。
支持快捷指令和自动化操作:用户可以创建快捷指令,在特定情境下自动执行应用操作,
使用硬件按钮触发操作:支持用户通过iPhoneApple Watch上的按钮直接启动特定功能。苹果正式推出集成AppleIntelligence新框架和Siri  Siri可以实时读取你屏幕信息并执行操作App Intents的基本组成部分:
1. App Intent(应用意图):定义应用中用户可以触发的具体操作,比如“打开文档””或“发送消息”。当用户通过Siri、快捷指令或Spotlight搜索时,这些意图可以被直接调用。
2.App Entity(应用实体):表示应用中的具体内容,比如照片、联系人或文件。通过定义App Entity,用户可以在SpotlightSiri中搜索并访问这些内容。比如,一个食谱应用可以定义”食谱”实体,用户可以通过Siri搜索具体的菜谱。
3.App Enum(应用选项):用于定义一组选项,例如照片应用中的“相册分类”或任务管理应用中的“任务状态”。这样,Siri在识别用户请求时可以更好地理解内容的上下文,
使用快捷指令和自动化功能
App Intents允许用户通过快捷指令应用(Shortcuts)设置自动化操作。例如,用户可以创建一个“早上好”快捷指令,让Siri在早上自动打开新闻应用,显示当天的新闻。
支持硬件交互
App Intents还支持通过iPhoneApple Watch上的物理按钮直接启动应用操作。例如,在iPhone的操作按钮或Apple Watch上,用户可以设置快捷方式,比如“一键打开相机“或”启动健身追踪”。

© 版权声明

暂无评论

暂无评论...