OG东方厅ADLab：智能音箱网络安全与隐衷钻研汇报
颁布功夫 2019-07-12本汇报重点分析了智能音箱面对的安全风险和隐衷风险。。通过对智能音箱的钻研，，OG东方厅ADLab发现了产品中存在有硬件调试接口缝隙、DLNA服务越权缝隙、服务端口越权缝隙等十余个安全缝隙，，这些缝隙可造成未授权设备节制、语音窃听、敏感信息泄露等。。OG东方厅ADLab已第一功夫向CNVD和CNNVD进行了缝隙传递，，并与ICSCERT结合颁布了《智能音箱隐衷与网络安全分析汇报》。。
目录
一、市场发展与将来趋向
二、技术发展
2.1 智能音箱职能
2.2语音交互技术
2.3组网模式
2.4安全及隐衷风险钻研的必要性
三、智能音箱安全风险与案例分析
3.1设备端
3.1.1盛开的调试接口
3.1.2 内置的后门
3.1.3未授权的盛劈头口
3.1.4 盛开未授权的DLNA（Digital Living Network Alliance) 服务
3.1.5 代码缺点
3.2 APP侧
3.2.1 APP申请过多的权限
3.2.2 APP通讯
3.3设备互联及第三方服务
3.3.1 设备间互联互通和谈
3.3.2第三方内容审核
3.3.3声纹鉴别算法缺点
四、隐衷风险
4.1 误唤醒
4.2 过多的权限
4.3 音箱的日志信息被泄露
4.4 灌音信息能够被持久跟踪学习
4.5 API敏感信息泄漏风险
4.6 用户无法治理自己的隐衷信息
五、风险防护及安全建议
一、市场发展与将来趋向
2014年11月，，亚马逊低调颁布一款智能音箱Echo，，它标志取智能音箱市场发展的起头。。2015年销量达到250万台，，2016年的销量达到520万台，，也因而凭借不俗的销量一举超过传统音箱领头羊Sonos，，夺得在线音箱行业市场销售头把交椅。。一度在智能音箱市场细分领域占据了极大部门的市场份额。。亚马逊颁布的智能音箱Echo受到了市场强烈反映，，引发了全球智能音箱热潮。。随后谷歌公司在2017年5月份也颁布了自家的智能音箱产品Google home。。紧随着，，苹果公司在2017年颁布智能音箱HomePod。。随着国外各大巨头厂商相继颁布各自的智能音箱产品，，国内厂商也紧追其后，，纷纷入场布局。。首先京东和科大讯飞合作推出了“中国版Echo”叮咚音箱，，随后酷狗、阿里巴巴、小米、百度、华为等企业也先后跟进，，陆续通过自研或者合作的方式入局。。
全球智能音箱市场发展飞快，，急剧发作，，2017年整年出货量达到了3220万台中国智能音箱市场增长迅猛，，目前已经成为全球第二大智能音箱市场。。
智能音箱极大拓展了传统音箱的能力领域，，就音乐这一特质来讲，，智能音箱不仅会保留并且还会进行相应的加强。。凭据有关机构的调研资料相识到，，消费者采办原因还是比力单一，，采办智能音箱的首要选择还是用来听音乐，，占比达到90%。。不外在将来的智能音箱的发展中，，音质和优质内容相结合将会是一种潮水。。厂商方面，，音频厂商与科技类公司进行合作，，相继推出机能较强的智能音箱，，会带头一批主打音质的智能音箱产品。。随着智能音箱产品的增长，，产品之间互联互通成为后续发展趋向，，同样这也切合智能家居发展法规，，能将智能音响融入到物联网世界里，，接入多方产品的平台，，美满平台布局。。智能音箱的内容是语音交互产品，，语音交互技术直接影响到用户履历，，因而具备越发智能化，，个性化也是消费者所等待的，，或将成为智能音箱行业的主题竞争技术。。
二、技术发展
智能音响是传统音箱升级的产品，，家庭消费者能够通过它上网点播歌曲，，上网购物，，亦或是相识气象预报，，按时闹钟，，新闻资讯等。。它也能够对智能家居设备进行节制，，好比打开窗帘，，设置冰箱温度，，提前打开热水器升温等，，这种智能音箱是接入了智能家居网络中能够进行的操作。。其实智能音箱主题比力简要，，就是让机械在说话对话这一环节占有近似于人类的鉴别能力，，并渗入到人们的日常生涯中。。
2.1 智能音箱职能
智能音箱应该具备语音交互能力，，并提供内容服务、互联网服务，，以及场景化智能家居的节制能力，，如下图所示：
图1 智能音箱职能示意图
智能音箱分歧于传统音箱，，它将是物联网世界的说话入口。。
2.2语音交互技术
智能音箱的发展与火爆离不开语音交互技术的支持，，当然，，壮大的语音交互的背后也离不开大数据、机械学习及人为智能等技术的支持。。各大语音技术厂商通过自主研发软硬件产品，，或对外输出说话技术，，赋能传统智能音箱厂商、内容和互联网服务厂商，，获取用户信息和数据，，成立物联网生态平台。。2017年12月4日，，中国电子科技集团公司第三钻研所（简称“中电三所”）结合中国电子学会消费者电子分会结合颁布了，，以“娱心悦耳，，音智双全”为主题的智能音箱评测颁布会。�；嵘习洳剂似涫笔谐」刈⒍冉衔械奈蹇钪悄芤粝涞钠啦獠街栌肓司帧�。对智能音箱的鉴别正确率测试了局如下图所示：
图2 智能音箱鉴别正确率
2.3组网模式
通常地，，用户通过手机端app进行全面操控，，例如用户注册，，登陆，，各类基础和个性设置以及服务内容定制等。。手机端app只和远程云服务器进行通讯，，云服务器作为“鹊桥”，，将用户指令转发给智能音箱，，智能音箱响应云服务器下达的指令。。响应了局再通过云服务器反馈得手机端并展示给用户。。当然，，用户能够通过语音交互直接和智能音箱互换，，智能音箱接管到语音信息后，，将语音信息打包转发给云服务器进行解析。。云服务器将说话信息转义后形成指令再次返给智能音箱进行执行，，执行了局通过云服务器再次反馈得手机端展示给用户。。云服务器和智能音箱之间的通讯和谈，，各家都分歧。。例如，，小米之前使用过miio和谈等。。智能音箱作为智能家居中一个重要设备节点，，当然也支持与第三方设备进行节制和谈交互，，使用的通讯和谈通常是自界说的。。对于智能音箱自身，，通常自身具备衔接局域网WiFi的职能。。下图为智能音箱组网模式。。
图3 组网示意图
2.4安全及隐衷风险钻研的必要性
人类的语音内容中蕴含了丰硕的小我信息。。通过语音内容，，分析人员能够获得小我的春秋、性别、籍贯、健康情况、周围环境等小我敏感信息。。所以智能音箱的语音采集及利用涉及到敏感的小我隐衷问题。。
隐衷权是人的基自己权，，公家有权势相识自己的小我信息是若何被采集的，，什么时辰被采集的，，在哪里被采集，，公家有权势决定自己的小我信息如电采集，，保留及使用方式。。随着民众自我�；ひ馐兜奶岣呒八痉ǖ慕�，，加强小我信息安全及隐衷�；さ暮羯苍嚼丛礁摺�。
2018年，，欧盟起头执行GDPR法案，，要求企业必须保险小我隐衷安全。。
2018年5月1日，，国度《信息安全技术小我信息安全规范》正式执行，，添补了国内小我信息�；ぴ诰咛逑质党叨壬系目杖薄�。
近年来，，关于智能音箱涉及的安全及隐衷问题也时时见报端。。
图4 智能音箱小我信息泄露报道
因而钻研智能音箱的安全及隐衷问题显得极度必要，，为此我们钻研了八款市场主流的智能音箱设备，，其中2款涉及到国外厂家，，6款产品涉及到国内厂家。。
三、智能音箱安全风险与案例分析
智能音箱的安全风险重要存在于智能音箱设备端、智能音箱APP及智能音箱的第三服务及互联和谈三部门。。
OG东方厅在对音箱的安全钻研期间，，共向CNVD（国度信息安全缝隙治理平台）及CNNVD（中国国度信息安全缝隙库）提交了十多个设备安全缝隙，，部门设备的编号及注明如下表所示。。
3.1设备端
3.1.1盛开的调试接口
为了出产及守护环节的方便，，很多智能音箱都盛开了对外的调试接口，，这些接口蕴含usb调试口、TTL调试口。。通过这些接口，，厂家能够对问题设备的固件进行更新。。但是这些盛开的调试接口同样为攻击者提供了分析固件和设备攻击提供了方便，，更进一步的攻击者能够向设备装置恶意的固件，，而后投放到市场销售。。
图5 盛开的调试接口
3.1.2 内置的后门
在智能音箱的固件分析中，，我们发现部门厂家在固件中设置了后门，，使得厂家能够在用户不知情的情况下，，能够远程地节制全网所有音箱，，并执行肆意系统号令，，对用户隐衷及设备安全造成了极大隐患。。
图6 智能音箱后门示例
3.1.3未授权的盛劈头口
部门音箱盛开了部门的盛劈头口，，通过这些盛劈头口，，利用未授权的盛劈头口，，攻击者能够节制音箱播放恶意音频或者进行灌音。。
某智能音箱监听8080端口，，若是攻击者通过向该8080端口发送有关的节制号令即可齐全节制音箱设备。。
图7 未授权的盛劈头口
3.1.4 盛开未授权的DLNA（Digital Living Network Alliance) 服务
我们发现部门音箱盛开了未授权的DLNA服务，，局域网内的攻击者能够攻击者能够节制音箱播放恶意音频或者是中断音箱正在播放的内容。。这种攻击对于使用于公共场所的音箱，，有很大的安全隐患。。
图8 盛开的DLNA服务
3.1.5 代码缺点
部门音箱在代码实现上存在缺点使得攻击者能够通过号令注入漏敞开启telnet服务，，并齐全节制音箱设备实现对设备的灌音等恶意操作。。存在号令注入代码如下图所示：
图9 获取playurl
获取playurl后，，进行号令拼接，，导致肆意号令执行。。
图10 肆意号令注入执行
成功攻击后，，开启telnet服务。。
图11 成功开启telent服务
3.2 APP侧
3.2.1 APP申请过多的权限
APP申请权限过多的问题比力严重，，在我们测试的国产音箱中，，该问题全数存在。。其中过度的权限蕴含但不限于APP读取短信，，读取手机的鉴别码，，发送/读取短信/彩信的权限，，打开摄像头的权限，，读取用户通话纪录及已手机已装置利用信息，，拨打电话，，使用呼叫转移，，读取活动数据的等敏感权限。。
图12 敏感权限
3.2.2 APP通讯
通讯和谈未加密问题，，使得攻击者能够利用这些露出的安全问题，，获得设备的节制权。。
图13 APP通讯抓包
3.3设备互联及第三方服务
3.3.1 设备间互联互通和谈
在智能家居的场景中，，智能音箱起到了节制中心的职位，，智能音箱通过鉴别用户的语音号令，，通过智能家居的互联和谈节制其他家居设备。。我们在钻研智能音箱的时辰，，发现部门厂家在智能家居设备的互联和谈中没有选取必要的安全审核机制，，出格是设备和设备之间合法性验证。。攻击者利用这些设计缺点就能够窃取音箱的语音号令内容或者犯法节制其他智能家居设备。。
3.3.2第三方内容审核
由于智能音箱的使用者，，很大一部门是儿童。。因而对智能音箱来说对音频回复内容的审核应该要有肯定的敏感内容防护，，不能回复反动音频或者是粗口内容。。在我们钻研的过程中，，我们发现个别音箱在处置内容鉴别时，，短缺必要的防护，，使得在一些特定的中英混合问题的场景中，，智能音箱会回复粗口的内容。。
3.3.3声纹鉴别算法缺点
在某款用于购物的音箱设备中，，选取了声纹识此外技术用于用户的买卖身份的鉴定，，但是OG东方厅测试中，，发现声纹识此外误识率较高，，在生物鉴别技术中（如虹膜，，指纹，，指静脉），，由于声纹技术及设备成本的约束，，声纹识此外识假率较低。。有些厂家的声纹技术无法匹敌灌音及人声仿照的攻击，，而这些攻击伎俩对于攻击者来说是较单一的。。
四、隐私风险
4.1 误唤醒
在音箱的使用场景中，，只有效户唤醒音箱后，，音箱能力网络用户的语音信息。。而由于有些音箱的唤醒算法存在缺点，，使得音箱时时在未被唤醒的情况下，，自行唤醒，，并且网络用户语音，，上传到后盾进行鉴别。。这样会使得用户的隐衷存在泄漏风险。。在我们测试的音箱中有五款智能音箱存在分歧水平的误唤醒情况。。占比达到56%。。
4.2 过多的权限
APP申请的蕴含APP读取短信，，发送短信的权限，，摄像头的权限，，通话纪录及已装置利用信息，，使用呼叫转移，，读取活动数据的等敏感权限。。
在音箱的使用场景中，，在气象预报的时辰必要获取用户地点的城市的地位，，在通常的使用情况下，，只必要音箱的外网IP地址即可获取用户的地域地位，，而某些音箱除此之外还获取用户家中路由器的WIFI的BSSID信息及GPRS位相信息。。
4.3 音箱的日志信息被泄露
某些音箱每天会上传用户音箱的系统日志信息，，这些日志信息不仅蕴含音箱的日常使用信息，，还蕴含了音箱地点局域网的WI-FI的密码信息。。
4.4 灌音信息能够被持久跟踪学习
在我们钻研的这些音箱的远场音频处置�？？ ？榛岫陨璞傅牟杉讨�，，会对统一设备采集的音频会偷偷打上唯一标识。。这些语音文件保留到云端后，，第三方厂家在进行语音分析及AI建模时，，能够通过暗藏的声音标识定位到小我，，能够对统一家庭成员的声音进行追踪，，能够对小我的语音特点变动进行长功夫的跟踪和学习。。
4.5 API敏感信息泄漏风险
智能音箱的产业链中蕴含了音箱设备厂家、语音鉴别及语音合成平台厂家、远场音频处置厂家、NLP算法厂家、音频内容提供商、外围设备商等。。
在智能音箱厂家与产业链厂家交互中API，，蕴含用户的手机号，，具体地理地位，，WI-FI的BSSID，，MAC地址等用户隐衷信息，，而这些信息对于产业链厂家来说不是业务所必须的。。
4.6 用户无法治理自己的隐衷信息
用户有权势决定自己的小我语音信息在云端的保留。。厂家应为用户治理这些隐衷信息提供服务入口。。
国外的智能语音设备厂家如亚马逊在APP侧及音箱侧为用户提供了删除云端小我灌音。。亚马逊音箱用户只必要对音箱说“Alexa，，删除我今天所说的所有”。。亚马逊将会删除在云端保留的用户灌音。。
惋惜的是目前我们没有在国内产品中看到这些有利�；び没б缘拇胧�。
五、风险防护及安全建议
通过对多款智能音箱进行深刻地钻研，，我们总结出五个方面的安全问题，，别离为安全风险、设备端、APP侧、外接设备及第三方组件以及隐衷风险。。
设备端问题重要是智能设备开发板露出出调试串口，，能够通过调试器将设备中的固件独读取出来进行逆向分析，，导致固件泄露。。
APP侧问题重要是存在被逆向分析的风险，，我们在钻研过程中，，对多款智能音箱的手机端app进行了逆向分析，，发现了好多关键问题，，例如，，设备和云服务器之间的通讯和谈。。智能音箱中使用通过第三方和谈进行局域网音频播放，，而使用的第三方和谈是没有进行设备认证的。。
最重要的一个安全问题就是隐衷问题，，我们发现多款设备都存在网络用户信息并打包回传云服务器的职能。。其中有的设备被攻击后，，在用户不通达的情况下，，能够进行灌音操作。。甚至还能回溯用户的使用痕迹和语音痕�！！�。
针对这些安全问题，，必要逐一进行防护。。APP侧要使用加固伎俩，，预防被逆向分析，，将一些关键和谈的实现放到native层实现。。对于外接设备及第三方组件，，智能设备厂商必要对第三方厂商的安全准入进行把关。。
隐衷问题是一个大问题，，同时也是一个宽泛的社会问题，，厂商可能通过网络用户使用信息来分析用户行为以便更好的提供服务，，但该当思考隐衷天堑。。同时对于网络到的用户信息应做到加密，，不能只管网络不论�；�，，厂商应该承担起自己的社会责任。。
全国政协委员、OG东方厅集团CEO严望佳在2019 全国政协会议上提交了三个提案，，其中《关于加快美满数字经济时期数据法治建设的提案》和《关于规范人为智能安全健康发展的提案》与小我隐衷有关。。这两个提案建议加快《数据安全法》工作及《小我信息�；しā饭ぷ�，，加快发展人为智能安全利用律例和伦理道德钻研及利用安全测评工作。。
尽早发展人为智能有关律例和道德伦理以及安全性的评估，，化解风险，，这将推动人为智能更好更快地发展。。
京公网安备11010802024551号