ios 10 开发-使用 Extension(Intents Extension和Intents UI Extens)创建SiriKit功能开发

2024-03-04 08:10

本文主要是介绍ios 10 开发-使用 Extension(Intents Extension和Intents UI Extens)创建SiriKit功能开发,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Intent的概念

Siri做完语音识别和语义分析之后,将结构化语音分析结果打包成一个某个领域(Domain)的意图(Intent),然后交给支持这个意图(Intent)的第三方应用(比如微信),第三方应用被启动,从传入的Intent中获取相应的信息,完成操作。
例如,上图演示中提到了的例句 “I need to send a message to Nancy via WeChat saying I'll be five minutes late",

  • 领域 (Domain):Messaging
  • 意图 (Intent):Send a message (INSendMessageIntent)
  • 意图参数 (Intent Parameter)
    • 收件人(recipients):Nancy
    • 消息内容(content):I'll be five minutes late

按照苹果官方的iOS文档,现在SiriKit共支持7个领域的共计22种意图:

  • 语音通话 VoIP Calling:打电话、发起视频电话、查通话记录
  • 信息 Messaging:发信息、搜索信息
  • 照片搜索 Photo Search:搜索照片、播放照片幻灯片
  • 个人之间的付款 Payments:向某人付款、向某人收款
  • 健身 Workouts:开始健身、暂停健身、恢复健身、结束健身、取消健身
  • 打车 Ride Booking:查看附近可用的车辆、订车、查看订单
  • 车载 CarPlay:切换音频输入源、空调、除霜、座椅加热、FM调台 (只针对汽车厂商)

IntentsExtension

Siri通过Intents extension的扩展方式和我们的应用进行交互。
其中,类型为INExtension的对象扮演着Intents extension扩展中直接协同Siri对象共同响应用户请求的关键角色。
1.选中我们的应用,进入项目总览界面,新增一个TARGET
2.选择Application Extension中的Intents extension
3.下一步,指定扩展的名字,语言及其他配置项
4.如果要自定义siri交互的UI,需要勾选Include UI Extension
5.完成


2.jpg

3.jpg

创建的Targe都会有一个plist文件


4.jpg


plist文件中,NSExtension是扩展配置NSExtensionAttributes包含IntentsSupported和IntentsRestrictedWhileLocked两个配置项,分别是支持的Intent和锁屏时限制使用的Intent,这里我们配置的都是发送信息的Intent。
锁屏的时候,出于安全考虑,限制通过Siri方式访问一些信息,可以保护用户隐私。
NSExtensionPrincipalClass指定了处理Intent的类UCIntentsHandler,他主要的工作就是根据不同的Intent,返回相应的Intent处理对象。


5.jpg


处理一个Intent对象需要3个处理环节:Resolve,Confirm,Handle
UCSendMessageIntentHandler实现了INSendMessageIntentHandling协议,协议中的方法就是这3个处理环节。
看一下这三个环节都做了什么事情


6.jpg


Resolve:将语音解析后INIntent对象中的关键信息提取出来,进行处理。不同Intent的协议需要处理的信息是不同的。
SendMessageIntent需要处理recipients,content


7.jpg

8.jpg


通过INIntentResolutionResult实例返回处理结果给siri,每一种信息对应一个确切的子类,比如recipient,对应的INPersonResolutionResult。
每一种resolution result又包含多种构造方法,用于表示不同的处理结果:成功(找到了唯一匹配的收件人),需要解疑(找到了相同姓名的多个收件人),不存在(没有此收件人),当然,还有一些其他的状态,具体的可以阅读官方文档。

下面是Confirm的实现


9.jpg


Confirm里的实现不是必须的,但是苹果强烈建议这么做。开发者可以对Intent的信息添加一些额外的合理性检查,再次确认用户的操作。
每一种Intent的处理结果会返回对应的IntentResponse,生成对象的时候需要设置user actitvity,默认可以设置为nil,关于UserActivity下面会介绍。

Handle code就是具体去执行用户的操作


10.JPG

演示效果就是这样的


11.JPG

12.JPG


NSUserActivity对象可以保存一些context,其中的INInteraction属性也包含了intent的一些信息,当主应用被siri或者用户打开时,可以通过NSUserActivity,来完成一些唤醒操作。这部分苹果的文档上现在介绍的还不是很清楚,我没有找到具体的例子和API介绍。估计和Handoff是类似的。

词汇定义

定义app的自有词汇可以帮助siri识别和你应用相关的用户命令,改善使用体验。


13.jpg


只能设置这几种类型的特有词汇

  • 通讯录名字
  • 照片标签
  • 相册名称
  • 健身名称

配置文件需要自己手动创建,必须命名为AppIntentVocabulary.plist,放置在应用base development language的.lproj路径下。
添加两个键在Root元素下ParameterVocabularies和IntentPhrases。plist配置文件中设置词汇,只能设置两种类型词汇Ride options和健身名称。
ParameterVocabularies是近义词,同音词定义。这个比较复杂,涉及到key值很多,具体查阅文档吧。
IntentPhrases可以帮助解析intent,往往一个intent可以有多种表达方式。
IntentName:
INRequestRideIntent
IntentExamples:


14.jpg


词汇识别配置文件的例子


15.jpg

Intent UI Extension

一个Intent UI Extension可以支持多个Intent,但是所有这些Intent共用一个viewcontroller
关于UI设计,苹果有一些建议,比如避免广告,有应用标识等,具体可以参考官方文档。创建步骤可以参考Intents Extension,plist只有IntentsSupported。
Intent UI Extension也是通过Viewcontroller来管理视图的,它的PrincipalClass是UIViewController的子类。
生命周期与普通的ViewController类似


16.JPG


这个ViewController还需要实现 INUIHostedViewControlling协议,并通过INInteraction和Sirikit进行信息交互,INUIHostedViewControlling协议只有一个需要实现的方法


17.jpg


显示效果如图所示


18.jpg


可以看到,自定义的UI和SIRI默认的UI重复了,对于约车和Message相关Intent,可以隐藏系统默认的UI,此时需要实现INUIHostedViewSiriProviding协议的方法


19.jpg


最终效果


20.jpg



原文链接:http://www.jianshu.com/p/01d207c7d50a

这篇关于ios 10 开发-使用 Extension(Intents Extension和Intents UI Extens)创建SiriKit功能开发的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/772555

相关文章

HarmonyOS学习(七)——UI(五)常用布局总结

自适应布局 1.1、线性布局(LinearLayout) 通过线性容器Row和Column实现线性布局。Column容器内的子组件按照垂直方向排列,Row组件中的子组件按照水平方向排列。 属性说明space通过space参数设置主轴上子组件的间距,达到各子组件在排列上的等间距效果alignItems设置子组件在交叉轴上的对齐方式,且在各类尺寸屏幕上表现一致,其中交叉轴为垂直时,取值为Vert

这15个Vue指令,让你的项目开发爽到爆

1. V-Hotkey 仓库地址: github.com/Dafrok/v-ho… Demo: 戳这里 https://dafrok.github.io/v-hotkey 安装: npm install --save v-hotkey 这个指令可以给组件绑定一个或多个快捷键。你想要通过按下 Escape 键后隐藏某个组件,按住 Control 和回车键再显示它吗?小菜一碟: <template

中文分词jieba库的使用与实景应用(一)

知识星球:https://articles.zsxq.com/id_fxvgc803qmr2.html 目录 一.定义: 精确模式(默认模式): 全模式: 搜索引擎模式: paddle 模式(基于深度学习的分词模式): 二 自定义词典 三.文本解析   调整词出现的频率 四. 关键词提取 A. 基于TF-IDF算法的关键词提取 B. 基于TextRank算法的关键词提取

Hadoop企业开发案例调优场景

需求 (1)需求:从1G数据中,统计每个单词出现次数。服务器3台,每台配置4G内存,4核CPU,4线程。 (2)需求分析: 1G / 128m = 8个MapTask;1个ReduceTask;1个mrAppMaster 平均每个节点运行10个 / 3台 ≈ 3个任务(4    3    3) HDFS参数调优 (1)修改:hadoop-env.sh export HDFS_NAMENOD

使用SecondaryNameNode恢复NameNode的数据

1)需求: NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 此种方式恢复的数据可能存在小部分数据的丢失。 2)故障模拟 (1)kill -9 NameNode进程 [lytfly@hadoop102 current]$ kill -9 19886 (2)删除NameNode存储的数据(/opt/module/hadoop-3.1.4/data/tmp/dfs/na

Hadoop数据压缩使用介绍

一、压缩原则 (1)运算密集型的Job,少用压缩 (2)IO密集型的Job,多用压缩 二、压缩算法比较 三、压缩位置选择 四、压缩参数配置 1)为了支持多种压缩/解压缩算法,Hadoop引入了编码/解码器 2)要在Hadoop中启用压缩,可以配置如下参数

Makefile简明使用教程

文章目录 规则makefile文件的基本语法:加在命令前的特殊符号:.PHONY伪目标: Makefilev1 直观写法v2 加上中间过程v3 伪目标v4 变量 make 选项-f-n-C Make 是一种流行的构建工具,常用于将源代码转换成可执行文件或者其他形式的输出文件(如库文件、文档等)。Make 可以自动化地执行编译、链接等一系列操作。 规则 makefile文件

使用opencv优化图片(画面变清晰)

文章目录 需求影响照片清晰度的因素 实现降噪测试代码 锐化空间锐化Unsharp Masking频率域锐化对比测试 对比度增强常用算法对比测试 需求 对图像进行优化,使其看起来更清晰,同时保持尺寸不变,通常涉及到图像处理技术如锐化、降噪、对比度增强等 影响照片清晰度的因素 影响照片清晰度的因素有很多,主要可以从以下几个方面来分析 1. 拍摄设备 相机传感器:相机传

嵌入式QT开发:构建高效智能的嵌入式系统

摘要: 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发,详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程,包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发,涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用,以及嵌入式 QT 与硬件设备的交互,包括输入输出设

OpenHarmony鸿蒙开发( Beta5.0)无感配网详解

1、简介 无感配网是指在设备联网过程中无需输入热点相关账号信息,即可快速实现设备配网,是一种兼顾高效性、可靠性和安全性的配网方式。 2、配网原理 2.1 通信原理 手机和智能设备之间的信息传递,利用特有的NAN协议实现。利用手机和智能设备之间的WiFi 感知订阅、发布能力,实现了数字管家应用和设备之间的发现。在完成设备间的认证和响应后,即可发送相关配网数据。同时还支持与常规Sof