SiriKit的使用介绍

1.jpg

Intent的概念

Siri做完语音识别和语义分析之后,将结构化语音分析结果打包成一个某个领域(Domain)的意图(Intent),然后交给支持这个意图(Intent)的第三方应用(比如微信),第三方应用被启动,从传入的Intent中获取相应的信息,完成操作。
例如,上图演示中提到了的例句 “I need to send a message to Nancy via WeChat saying I'll be five minutes late",

  • 领域 (Domain):Messaging
  • 意图 (Intent):Send a message (INSendMessageIntent)
  • 意图参数 (Intent Parameter)
  • 收件人(recipients):Nancy
  • 消息内容(content):I'll be five minutes late

按照苹果官方的iOS文档,现在SiriKit共支持7个领域的共计22种意图:

  • 语音通话 VoIP Calling:打电话、发起视频电话、查通话记录
  • 信息 Messaging:发信息、搜索信息
  • 照片搜索 Photo Search:搜索照片、播放照片幻灯片
  • 个人之间的付款 Payments:向某人付款、向某人收款
  • 健身 Workouts:开始健身、暂停健身、恢复健身、结束健身、取消健身
  • 打车 Ride Booking:查看附近可用的车辆、订车、查看订单
  • 车载 CarPlay:切换音频输入源、空调、除霜、座椅加热、FM调台 (只针对汽车厂商)

IntentsExtension

Siri通过Intents extension的扩展方式和我们的应用进行交互。
其中,类型为INExtension的对象扮演着Intents extension扩展中直接协同Siri对象共同响应用户请求的关键角色。
1.选中我们的应用,进入项目总览界面,新增一个TARGET
2.选择Application Extension中的Intents extension
3.下一步,指定扩展的名字,语言及其他配置项
4.如果要自定义siri交互的UI,需要勾选Include UI Extension
5.完成


2.jpg

3.jpg

创建的Targe都会有一个plist文件


4.jpg

plist文件中,NSExtension是扩展配置NSExtensionAttributes包含IntentsSupported和IntentsRestrictedWhileLocked两个配置项,分别是支持的Intent和锁屏时限制使用的Intent,这里我们配置的都是发送信息的Intent。
锁屏的时候,出于安全考虑,限制通过Siri方式访问一些信息,可以保护用户隐私。
NSExtensionPrincipalClass指定了处理Intent的类UCIntentsHandler,他主要的工作就是根据不同的Intent,返回相应的Intent处理对象。


5.jpg

处理一个Intent对象需要3个处理环节:Resolve,Confirm,Handle
UCSendMessageIntentHandler实现了INSendMessageIntentHandling协议,协议中的方法就是这3个处理环节。

看一下这三个环节都做了什么事情


6.jpg

Resolve:将语音解析后INIntent对象中的关键信息提取出来,进行处理。不同Intent的协议需要处理的信息是不同的。
SendMessageIntent需要处理recipients,content
7.jpg

8.jpg

通过INIntentResolutionResult实例返回处理结果给siri,每一种信息对应一个确切的子类,比如recipient,对应的INPersonResolutionResult。
每一种resolution result又包含多种构造方法,用于表示不同的处理结果:成功(找到了唯一匹配的收件人),需要解疑(找到了相同姓名的多个收件人),不存在(没有此收件人),当然,还有一些其他的状态,具体的可以阅读官方文档。

下面是Confirm的实现


9.jpg

Confirm里的实现不是必须的,但是苹果强烈建议这么做。开发者可以对Intent的信息添加一些额外的合理性检查,再次确认用户的操作。
每一种Intent的处理结果会返回对应的IntentResponse,生成对象的时候需要设置user actitvity,默认可以设置为nil,关于UserActivity下面会介绍。

Handle code就是具体去执行用户的操作


10.JPG

演示效果就是这样的


11.JPG

12.JPG

NSUserActivity对象可以保存一些context,其中的INInteraction属性也包含了intent的一些信息,当主应用被siri或者用户打开时,可以通过NSUserActivity,来完成一些唤醒操作。这部分苹果的文档上现在介绍的还不是很清楚,我没有找到具体的例子和API介绍。估计和Handoff是类似的。

词汇定义

定义app的自有词汇可以帮助siri识别和你应用相关的用户命令,改善使用体验。


13.jpg

只能设置这几种类型的特有词汇

  • 通讯录名字
  • 照片标签
  • 相册名称
  • 健身名称

配置文件需要自己手动创建,必须命名为AppIntentVocabulary.plist,放置在应用base development language的.lproj路径下。
添加两个键在Root元素下ParameterVocabularies和IntentPhrases。plist配置文件中设置词汇,只能设置两种类型词汇Ride options和健身名称。
ParameterVocabularies是近义词,同音词定义。这个比较复杂,涉及到key值很多,具体查阅文档吧。
IntentPhrases可以帮助解析intent,往往一个intent可以有多种表达方式。
IntentName:
INRequestRideIntent
IntentExamples:


14.jpg

词汇识别配置文件的例子


15.jpg

Intent UI Extension

一个Intent UI Extension可以支持多个Intent,但是所有这些Intent共用一个viewcontroller
关于UI设计,苹果有一些建议,比如避免广告,有应用标识等,具体可以参考官方文档。创建步骤可以参考Intents Extension,plist只有IntentsSupported。
Intent UI Extension也是通过Viewcontroller来管理视图的,它的PrincipalClass是UIViewController的子类。
生命周期与普通的ViewController类似


16.JPG

这个ViewController还需要实现 INUIHostedViewControlling协议,并通过INInteraction和Sirikit进行信息交互,INUIHostedViewControlling协议只有一个需要实现的方法


17.jpg

显示效果如图所示
18.jpg

可以看到,自定义的UI和SIRI默认的UI重复了,对于约车和Message相关Intent,可以隐藏系统默认的UI,此时需要实现INUIHostedViewSiriProviding协议的方法
19.jpg

最终效果
20.jpg
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,386评论 6 479
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,939评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,851评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,953评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,971评论 5 369
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,784评论 1 283
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,126评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,765评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,148评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,744评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,858评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,479评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,080评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,053评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,278评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,245评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,590评论 2 343

推荐阅读更多精彩内容