CN108139718B 包括基于可寻址家庭自动化（ha）设备的用户可选择列表的期望场景实现的ha系统及相关方法 （K4连接股份有限公司）

WO2017/004204EN2017.01.05US8490006B1,2013.07.162018.06.082015.06.302015.06.302015.06.302015.06.302015.06.302015.06.302015.06.302015.06.302018.02.07PCT/US2016/0400972016.06.29户可选择列表的期望场景实现的HA系统及相关得包括第一触发动作和响应事件的第一期望场件时使用第一用户选择的可寻址设备来执行第第二期望场景的对应可寻址设备的第二用户可且在发生第二触发事件时使用第二用户选择的2从用户获得包括至少一个第一触发动作和至少一个第一响应事件的第一期望场景而备中能够实现包括至少一个第一触发动作和至少一个第一响应事件的第一期望场景的对确定可寻址HA设备中的能够实现所述第一期望场景的第一用户选择在发生所述至少一个第一触发动作时，使用可寻址HA设备中从云获得包括至少一个第二触发动作和至少一个第二响应事件的第在获得所述第二期望场景之后，呈现可寻址HA设备中能够实动作和至少一个第二响应事件的第二期望场景的对应可寻址HA设备的第二用户可选择列在发生所述至少一个第二触发动作时，使用可寻址HA设备的所2.如权利要求1所述的HA系统，其中所述HA设备场景控制器被配置为获得所述至少一3.如权利要求1所述的HA系统，其中所述HA设备场景控制器被配置为获得所述至少一经由所述用户输入设备，允许用户选择可寻址HA设备中5.如权利要求1所述的HA系统，其中所述HA设备场景控制器被配置为在发生所述至少6.如权利要求1所述的HA系统，其中所述HA设备场景控制器被配置为无线地获得所述至少一个第一和第二触发动作以及所述至少一个第一7.如权利要求1所述的HA系统，其中所述HA设备场景控制器被配置为无线地实现所述8.如权利要求1所述的HA系统，其中所述多个可寻址HA设备中的每一个包括运动检测3从用户获得包括至少一个第一触发动作和至少一个第一响应事件的第一于操作所述多个可寻址HA设备中的相应可寻址HA设备而不管所述多个可寻址HA设备的能确定所述给定位置处的所述多个可寻址HA设备何时不能实现包括至少一个第一触发动作和至少一个第一响应事件的所述第一期望场景，并且在获得所述第一期望场景之后，呈现能够实现所述第一期望场景的至少一部分的附加可寻址确定所述给定位置处的所述多个可寻址HA设备何时能够实现HA设备中能够实现第一期望场景的对应可寻址HA设备的第一用在发生所述至少一个第一触发动作时，使用所述可寻址HA设备12.如权利要求9所述的HA系统，还包括耦合到所述HA设备场景控制器的用户接口设经由所述用户输入设备，允许用户选择所述可寻址HA设备17.一种在家庭自动化HA系统中实现第一和第二期望场景的方法，所述HA系统包括在4从用户获得包括至少一个第一触发动作和至少一个第一响应事件的第一期望场景而备中能够实现包括至少一个第一触发动作和至少一个第一响应事件的所述第一期望场景确定可寻址HA设备中的能够实现所述第一期望场景的第一用户选择在发生所述至少一个第一触发动作时，使用可寻址HA设备中从云获得包括至少一个第二触发动作和至少一个第二响应事件的第在获得所述第二期望场景之后，呈现所述可寻址HA设备中能够实触发动作和至少一个第二响应事件的第二期望场景的对应可寻址HA设备的第二用户可选在发生所述至少一个第二触发动作时，使用所述可寻址HA18.如权利要求17所述的方法，其中所述HA设备场景控制器获得所述至少一个第一和19.如权利要求17所述的方法，其中所述HA设备场景控制器获得所述至少一个第一和20.如权利要求17所述的方法，还包括使用耦合到所述HA设备场景控制器的用户接口择所述可寻址HA设备中的第一和第二用户选择的可寻址21.一种在家庭自动化HA系统中实现第一期望场景的方法，所述HA系统包括在给定位从用户获得包括至少一个第一触发动作和至少一个第一响应事件的第一于操作所述多个可寻址HA设备中的相应可寻址HA设备而不管所述多个可寻址HA设备的能确定所述给定位置处的所述多个可寻址HA设备何时不能实现包括至少一个第一触发动作和至少一个第一响应事件的所述第一期望场景，并且在获得所述第一期望场景之后，确定所述给定位置处的所述多个可寻址HA设备何时能够实现寻址HA设备中能够实现所述第一期望场景的对应可寻址HA设备确定所述可寻址HA设备的第一用户选择的可寻址HA设22.如权利要求21所述的方法，其中所述HA设备场景控制器获得所述至少一个第一触523.如权利要求21所述的方法，其中所述HA设备场景控制器获得所述至少一个第一响24.如权利要求21所述的方法，还包括使用耦合到所述HA设备场景控制器的用户接口可寻址HA设备中的第一用户选择的可寻址6包括基于可寻址家庭自动化(HA)设备的用户可[0004]解决这些缺点的一种做法是让消费者(可以包括用户和/或企业)使用提供一个应[0006]授予Reeser等人的美国专利No.8,490,006涉及用于构建自动化系统的场景创[0007]授予Shearer等人的美国专利申请公开No.2015/0160797涉及一种用于基于规则7[0008]家庭自动化(HA)系统可以包括在给定位置处的多个可寻址HA设备以及HA设备场的可寻址设备的初始知识的情况下建立场景，并且可以使用不同的可寻址HA设备共享场个第一和第二响应事件的可寻址HA设备中的对应可寻[0014]一个方法方面针对一种在包括在给定位置处的多个可寻址HA设备的HA系统中实8寻址HA设备的第二用户可选择列表，确定可寻址HA设备中的第二用户选择的可寻址HA设[0015]另一个方法方面针对一种在包括在给定位置处的多个可寻址HA设备的HA系统中9[0035]图15A是示出在图1A的系统的远程设备上按房间布置的可寻址设备的用户界面的[0036]图15B是示出在图1A的系统的远程设备上按设备类型布置的可寻址设备的用户界[0037]图15C是示出在图1A的系统的远程设备上按场景类型布置的可寻址设备的用户界[0038]图16是示出要与图1A的系统的LED灯可寻址设备一起使用的拾色器的用户界面的[0048]图25是对于图1A的系统中的场景示出用户从要素块的列表中进行选择的能力的[0049]图26是对于图1A的系统中的场景示出基于用户输入建议的设备操作块的用户界[0050]图27是对于图1A的系统中的场景示出选择什么设备提供要素的用户输入的提示[0051]图28是示出在图1A的系统中用于给定的要素或设备集合的不同场景的用户界面[0052]图29A是示出对于在图1A的系统中选择设备将场景映射到特定于家庭的设备的用[0062]图37A-37E是图示根据实施例的、在可寻址HA设备与远程访问无线通信设备之间[0064]首先参考图1A，电子设备集成系统说明性地具有家庭自动化(HA)系统20的形式，备执行的处理和功能可以由处理器46或者由处于不同地理位置并通过本领域技术人员理行K4Home软件的设备上相应的处理器或处理电路系统(例如，家庭设备32的处理器38)执[0068]K4Hub34是也可以运行K4Home软件并在设备上托管系统体系架构的设备。K4Hub34包括壳体41和由壳体承载的集线器处理电路系统42。K4Hub34还包括多个无线电端口串行总线(USB)端口。K4Hub34在本地运行系统并且可以直接与可寻址设备31a-31n通信，控制器插入无线电端口43a-43n中的一个，这允许K4Hub34与基于Z波的可寻址设备通信。的K4Home软件可以通过经由K4Hub或计算机的USB端口附连端口用附加的家庭自动化通信[0071]K4App是K4ConnectHA系统20的用户界面35的位置，并允许用户访问K4Home软件并通过远程设备36(例如，包括显示器48和耦合到显示器的处理器49的智能手机或平板设提供例如在家庭设备32或K4Hub34上运行的本地K4Home软件与在本地家庭网络之外的(例如在远程设备36上运行的)K4App之间的连接。K4Away还提供K4Home软件与K4Connect系统[0074]现在参考图1B，将描述HA系统20的上述组件。HA系统20包括可寻址HA设备31a-连接器43a-43n。每个端口连接器43a-43n被配置为耦合到对应HA无线无线电控制器44a-类型的连接器。HA集线器设备34还包括耦合到无线无线电端口连接器43a-43n的集线器处理电路系统42。集线器处理电路系统42基于相应的HA无线通信协议与可寻址HA设备31a-线电控制器44a-44n来使用不同HA无线通信协议中的相应不同HA无线通信协议进行无线通信。该方法还包括使用HA集线器设备34基于相应HA无线通信协议与可寻址HA设备31a-31n连接的桥接器之间的通信使用web套接字作连接从本地消息队列51发起，以减少在刺穿本地网络的防火墙时可以是固有的安全问题。[0080]本地消息队列51从云消息队列52接收消息并将消息分发到云消息队列52以及从息的这种分发技术允许程序的每个部件的独立性并且将逻辑或规定的动作留给个体服务例性设备配置可以包括设备的IP地址、设备在房屋内的位置以及音频配置中的声道位置[0087]HA系统20还包括家庭设备消息队列控制器511和耦合到其的家庭设备消息队列存[0088]云消息队列控制器521和家庭设备消息队列控制器511使可寻址HA设备31a-31n的种消息可以包括与可寻址HA设备31a-31n的操作和控[0089]本地客户端设备36a或远程设备(例如，运行K4App)包括本地客户端设备控制器地消息队列控制器511同步时存储可寻址HA设备31a-31n的设备配置、设备能力和设备状备控制器361b与云消息队列控制器521交换与可寻址HA设备31a-31n相关的消息(例如，感[0092]一个方法方面针对一种与多个可寻址HA设备31a-31n进行通信的方法，每个可寻用云消息队列控制器521和云中耦合到其的云消息队列存储器522，该云消息队列存储器器521和家庭设备消息队列控制器511使多个可寻址HA设备31a-31n的设备配置、设备能力系统或家庭内部件的响应场景(图3)。分析服务器54将用户和系统动作记录到云存储系统机服务器也充当不能直接连接到相机的远程用户的图[0098]配置服务器62(图6)存储家庭自动化集成系统20的持久化配置。配置服务器62还使用设备连接处理期间的设备描述与设备设置向导合作来设置HA系统20上的可寻址设备[0099]发现服务器55(图8A)找到可寻址设备以连接到K4Connect系统20。发现服务器55在其搜索中使用设备(例如，可寻址设备31a-31n)的签名来发现不是本身可发现用于连接来自新可控设备的信号或者扫描系统以寻找可寻址设备31a-31n的签名。发现服务器55运行使用来自可寻址设备31a-31n的签名的文本匹配处理的UPNP和MDNS处理，以识别可控设以用数据查询端口并基于该查询获得识别响应。ARP扫描也通过MAC地址匹配来识别设备。另一个有利元素是UDEV扫描，它对于连接到运行K4Home并运行TTY匹配的硬件的设备使用过消息队列51向配置服务器62和通知服务器66发送通知(图7)，然后通知服务器66通知用[0106]在一些实施例中，来自可寻址设备31a-31n的通告可以用于限制可寻址设备。例应的不同无线通信协议进行无线通信。可寻址HA设备31a-31n可以包括运动检测器、恒温[0108]发现服务器55可以具有控制器551和耦合到其的存储器552的形式。存储器552存储用于可寻址HA设备31a-31n中的配对和未配对的可寻址HA设备的HA设备签名。HA设备签于存储在存储器552中的所存储的HA设备签名中的给定HA设备签名而扫描可寻址设备来轮[0110]控制器551还将未配对的可寻址HA设备的相关联HA设备签名与所存储的HA设备签名进行比较。控制器551可以基于通用即插即用(UPnP)处理和多播域名系统(mDNS)处理中的至少一个将未配对的可寻址HA设备的相关联HA设备签名与所存储的HA设备签名进行比来自ARP扫描的端口数据将未配对可寻址HA设备的相关联HA设备签名与所存储的HA设备签[0112]可替代地或附加地，控制器551可以基于udev扫描来轮询可寻址H[0113]当未配对的可寻址HA设备的HA设备签名与所存储的HA设备签名之一之间存在匹[0115]HA系统20还包括耦合到控制器551的无线电控制器44a-44n。可寻址设备31a-31n[0116]一种方法方面针对一种允许在HA系统20中未配对的可寻址HA设备31a-31n的配对还用于将未配对的可寻址HA设备31a-31n的相关联HA设备签名与所存储的HA设备签名进行[0118]状态服务器67用作存储最后已知状态的日志而不必轮询系统中的设备的系统范态信息存储在驱动程序堆栈中的当前常见做法是有利的改进。web服务器68运行用户接口[0119]安全服务器56执行家庭自动化集成系统20的安全处理(图13A)。安全服务器56监务器56可以忽略已知扫描或连接并且不对系统造成威胁并且在它接收到未知或意外的扫是对家庭自动化集成系统20的威胁。如果所连接的家庭自动化或可寻址设备31a-31n(例如，冰箱)对开放端口进行相同的扫描或连接到其，那么安全服务器56对动作进行日志记务器56可以将设备识别为被劫持和/或恶意软件并被标记为向分析服务器54报告。分析服存储在存储器562中。HA设备签名可以包括关于可寻址HA设备31a-31n的预期动作的数据。备签名可以包括可以用作表征可寻址HA设备31a-31n的操作行为的基础的附加标识符和/址设备31a-31n使用不同无线通信协议中的相应不同无线通信协议[0125]HA系统20包括耦合到存储器562并且例如通过扫描或轮询通信端口而经由相应的HA安全控制器561基于相应的HA设备签名确定给定的可寻址HA设备是否在异常操作并且传[0126]HA安全控制器561还在给定的可寻址HA设备31a-31n被验证为在异常操作时生成控制器561可以将通知传送给与被验证为在异常操作的给定可寻址HA设备相关联的相应制[0128]HA系统20还包括耦合到HA安全控制器561的无线电控制器44a-44n。可寻址设备31a-31n中的每一个可以被配置为经由相应的无线电控制器44a-44n与HA安全控制器561无可寻址HA设备经由当前未被使用的给定通信端口进行通信时基于相应的HA设备签名来确[0130]另一个方面针对一种K4Home软件的设置向导。设置向导可以为连接到K4Connect系统20(并且特别地，连接到K4Home)的每个设备提供越来越简单和相对统一的设置处理。以在移至向导中的下一个步骤之前允许一个问题和从那问题接收的一个的时候自定义模板将仍然使用K4Connect部件，并且自定义模板不能与由K4Home软件提供上提供进度条71或者作为例如在进度条上包括帮助按钮72的用户界面35的一部分来提供或控制K4Connect系统上的可寻址设备31a-31n。例如，K4Connect系统20可以按房间(图面35允许用户按可寻址设备31a-31n的设备类别或按位置(FIG15a)查看可寻址设备31a-备31a-31n而不是定位触摸屏显示器上的单个点进行调节来提供增加的可用性。在一些实[0136]借助于远程设备36的处理器49，LED拾色器75检测多色LED灯泡31a能够产生的颜完成的。CIE增量可以由制造商确定，其数据可以存储在远程设备36中或者从云设备33接器49'基于存储的CIE增量信息或捕获的图像在显示器48'上显示多色LED灯泡31a'的可用[0138]如本领域技术人员将认识到的，多色LED灯泡31a的能力通常远小于典型CIE图所[0139]现在附加地参考图18，用户界面35还提供用于与多个K4Hub集线器或集线器设备[0140]自动地)到本地集线器并通过云连接到任何其它集线器来有利地允许用户有从用息队列或消息队列服务器50提供翻译层，以与连接到K4Connect系统20的可寻址设备31a-可寻址设备31a-31n的具体命令并将翻译后的命令发送到可[0144]桥接器82的独立性有利地允许开发人员独立于整个K4Connect系统20为几乎任何[0145]更具体地，例如，当家庭设备32或集线器设备34检测到新的可寻址设备31a-31n[0146]每个桥接器的独立性还允许更好地使用家庭K4Connect系统20上的带宽和存储空[0147]现在具体参考图20，当新的桥接器91被创建并加载到K4Connect系统20时，每个备签名允许发现服务器35扫描可用端口并辨别可以通过新的桥接器91连接的新可寻址设66发送新的可寻址设备通知，通知服务器66在远程设备36的显示器48上启动用户界面35，[0149]现在附加地参考图21A，K4Connect系统20的桥接器82a-82c也是本领域技术人员接器82a-82c之一发生故障或者如果到消息队列50的连接失败，那么其余的系统部件继续的一个影响可以是无法控制与发生故障的桥接器82a-82c相关联的具体可寻址设备31a-桥接器82a-82c所描述的功能。更具体地，处理器641和存储器642被配置为实现消息队列队列50的通用消息转换成用于可寻址HA设备31a-31n中的给定可寻址HA设备的特定消息。特定消息可以是特定于相应沙箱化的桥接器82a-82c的特[0152]一旦沙箱化的桥接器82a-82c之一发生故障，处理器641和存储器642就实现重新理器641可以基于沙箱化的桥接器与消息队列50之间的通信和/或沙箱化的桥接器82a-82c之间的通信来确定发生故障的一个沙箱化的桥接器82a-[0153]HA系统20还包括耦合到处理器641的无线电控制器44a-44n。可寻址设备31a-31n[0154]一个方法方面针对一种维护HA系统20中的多个沙箱化的桥接器82a-82c的操作的个可寻址HA设备31a-31n中的相应可寻址HA设备的多个通用消息，并且使用多个沙箱化的桥接器82a-82c将来自消息队列的通用消息转换成用于可寻址HA设备中的给定可寻址HA设备的特定消息。该方法还包括在多个沙箱化的桥接器82a-82c之一发生故障时使用处理器[0156]标准响应场景可以由用户通过使用场景向导来设置。场景向导包括可寻址设备的触发器、受影响的可寻址设备31a-31n以及可寻址设备将采取以对场景作出响应的动作[0157]标准响应场景可以由程序检测到的触发器列表或通过用户激活用户界面35中的[0158]该场景已经指定了用户定义的部件或者可寻址设备31a-31n的哪个集合将为了场寻址设备n31n控制咖啡机的操作。系统20生成被发送到可寻址设备的命令。可寻址设备[0160]标准响应场景还可以在使用云设备33或K4Away的用户与列出可用场景的市场之响应场景的东西，其允许使用可以在各方案(recipe)中产生相同属性的不同可寻址设备。这有利地允许使用响应场景需要的相同元素但是不使用完全相同的设备或者可以通过添加更多可控设备来增强的情况下，K4Connect系统20例如经由远程设备36里用户可以免费或购买地下载可寻址设备31[0165]用户可以建立要素响应场景(方框114)或者从云设备33下载共享的响应场景。然属性的可寻址设备31a-31n连接到K4Connect系统20，那么系统通过轮询可寻址设备(方框103)来确定可寻址设备的状态(方框106)。如果满足场景的所有要素(方框104)，那么K4Connect系统20执行场景(方框108)。如果K4Connect系统20的要素不满足条件(方框104)，那么系统可以或者再次轮询属性状态(方框103)或者等待由K4Home或响应场景设置云设备33的建议的可控设备(方框110)并且还可以协作，以便例如在用户界面35上向用户相机提供)、运动(由相同相机的内置运动检测器提供)和时间段。然后该给定的用户在许多品牌和类型的运动检测器中的任何一个的订购的K4Store或云设备33的链接。然后该该另一个用户使用相同的基本响应场景在晚上10点至早上6点记录下自己客厅中的任何运别哪个可寻址HA设备32a-32n负责实现第一触发动作和第一响应事件。HA设备场景控制器入的用户输入设备351)获得第一触发动作和第一响应事件。用户接口设备360可以是远程[0170]HA设备场景控制器581还例如在耦合到用户接口控制器353的用户接口设备360的显示器354上呈现可寻址HA设备31a-31n中能够实现第一期望场景的对应可寻址HA设备的件对应或者将要执行第一触发动作和第一响应事件的可寻址HA设备31[0171]HA设备场景控制器581还确定可寻址HA设备31a-31n中的第一用户选择的可寻址[0172]HA设备场景控制器581还例如无线地从云331获得包括第二触发动作和第二响应[0173]HA设备场景控制器581可以例如在显示器354上呈现能够实现第二期望场景的对[0174]HA设备场景控制器581还可以确定何时在给定位置处的可寻址HA设备31a-31n不[0175]一个方法方面针对一种在HA系统20中实现第一期望场景和第二期望场景的方该方法包括使用HA设备场景控制器581从用户获得包括第一触发动作和第一响应事件的第一期望场景并且呈现能够实现第一期望场景的对应可寻址HA设备31a-31n的第一用户可选[0176]HA设备场景控制器581还用于从云331获得包括第二触发动作和第二响应事件的第二期望场景，并且呈现能够实现第二期望场景的对应可寻址HA设备31a-31n的第二用户可选择列表。设备场景控制器581还用于确定可寻址HA设备中第二用户选择的可寻址HA设何时在给定位置处的可寻址HA设备31a-31n不能够实现该场景，并且呈现用于附加可寻址[0181]K4Connect系统20还通过其分析数据集合中的隐私方法提供安全性。数据存储在[0182]K4Connect系统20还使用授予用户对所收集数据的完整权利和所有权的安全方[0183]K4Hub34还可以用作连接到家庭路由器的Wifi路由器，使得连接到K4Connect系统20的所有设备都通过K4Hub34的私有Wifi网络被路由。这有利地允许连接到K4Connect系统的设备(诸如个人计算机)之间的分离。这种分离可以减少个人计算机上的攻击影响本地服务器设备)报告直播视频聊天的开始时间的健康状况的老年父母而使用该系统或者假如用户只是想知道他们自己的健康状况而使[0187]在一些实施例中，健康或活动数据可以由家庭成员或者在小组生活场合(诸如辅社交媒体应用。[0196]在一些实施例中，K4Life或K4Community系统可以不限于健康相关设备和健康相进行日志记录。这个信息可以用在K4Community环境中，如本领域技术人员将认识到的那[0199]虽然已经将若干实施例描述为包括由电子设备的处理器或处理电路系统执行的[0201]另一方面针对一种存储用于执行本文描述的系统和方法的任何功能的指令的非内温度传感器1032感测室内建筑区域1022的室[0203]温度控制器1033由壳体1031承载。HA恒温器设备1030还包括耦合到温度控制器备1038a-1038n之一生成设定点温度。例如，基于从运动检测器检测到的运动，HA控制器[0209]现在附加地参考图36，借助于图1040和对应的显示1036a-1036e来图示气候控制系统1020的操作，其在图上识别出的不同时间点示出对应的室内温度1043a-1043e和设定点温度达阈值温度差的室内建筑区域1022的室内温度的交叉在操作模式之间切换HVAC系解决给定可寻址HA设备和/或更新软件或配置的问题会特别有[0212]可寻址HA设备2031a-2031n通常在一个或多个网络地址翻译(NAT)路由器和/或防[0213]按需SSH隧穿允许可寻址HA设备2031a-2031n中给定的可寻址HA设备例如通过周[0217]给定的可寻址HA设备2031a-2031n根据从web可访问的位置检索的指令打开到云[0218]受益于在前面的描述和相关联附图中给出的教导的本领域技术人员将会想到本并且这些修改和实施例旨在被包括在所附权利