亚马逊开店参考

亚马逊智能音箱有千人监听团队:曾听到性侵案再现新技术突破

-亚马逊语音助手alexa的声音 -alexa -亚马逊 -google

亚马逊语音助手alexa的声音

论文,程天梦,综合报告

不仅是在中国流行的移动应用程序,而且是近年来国内外出现的智能扬声器,它们遇到了“屏幕上有耳朵”的问题。最新的例子是植入了智能语音助手Alexa。在亚马逊的智能扬声器Echo中,该扬声器暴露给参与“监控”的人类。

4月11日,彭博社发布了一份调查报告,揭示了亚马逊Alexa“监控”团队中这些人类员工的工作内容。根据该报告,有时,所涉及的工作人员会听到用户的私人语音剪辑,例如妇女严重不合时宜地在浴缸里唱歌,或一个孩子在呼救。另外两名雇员甚至声称他们已经听到了他们认为是性侵犯的消息。

亚马逊从未披露过将手动收听用户与Alexa之间的私人聊天,也从未披露过Alexa语音技术的一部分包含人类参与。从事该项目的七名员工向彭博社透露了针对Amazon Alexa的手动语音检查过程。

亚马逊的Echo是全球最受欢迎的智能扬声器。它于2014年上市。在Echo扬声器问世之后,谷歌还推出了嵌入了Google语音助手的Google Home智能扬声器,苹果随后又使用Siri推出了智能扬声器HomePod。在中国,天猫精灵,小度智能扬声器,小米AI扬声器和其他设备也进入了更多的用户家庭。

如今,许多用户习惯于通过唤醒词激活扬声器中的语音助手,然后提出问题或对其进行指示。一些智能扬声器甚至可以与用户短暂聊天。但是,彭博社的报告建议,在智能助手如此“了解您”的背后,不仅可能是人工智能和机器学习,还可能是一群人工员工,他们人工聆听用户与设备之间对话的录音,以及帮助改善算法的结果。

Google Home智能音箱 Google Home智能音箱

Google Home智能音箱

亚马逊千人监听团队

彭博社报道说,亚马逊在全球拥有成千上万的员工,他们手动收听和检查用户与智能语音助手Alexa之间的私人对话,目的是帮助Alexa改善其语音识别技术。

Echo音箱 Echo音箱

Echo音箱

该团队专门研究在家中和办公室中由Echo扬声器捕获的录音。这些录音将被转录,添加注释,然后反馈到软件中,以消除Alexa对人类语言的理解之间的差距,并帮助其更好地响应指令。

亚马逊在广告语中引入了“ Alexa生活在云中,并且变得越来越聪明”。实际上,就像许多需要从经验中学习的软件工具一样,人类已经为机器做了很多教学。

执行这项工作的团队包括全职的Amazon员工和合同工,他们在世界各地工作,包括波士顿,哥斯达黎加,印度和罗马尼亚。该员工签署了保密协议,禁止对该项目进行公开讨论。

罗马尼亚首都布加勒斯特的两名员工透露,他们每天工作9个小时,每个班次最多解析1000个音频剪辑。

波士顿的一名雇员表示,他已针对特定话语(例如泰勒·斯威夫特·斯威夫特)挖掘了累积的语音数据,并对其进行了注释,以表明搜索是针对该歌手的。

私人声音片段也将被捕获

智能扬声器需要始终打开麦克风,以监视用户是否讲了唤醒字以及他们是否正在向自己发出命令。亚马逊语音助手Alexa的软件旨在连续录制音频剪辑并收听唤醒词。默认的唤醒词是“ Alexa”。

在当前工作流程下,设备还将捕获私人声音片段。

有时,工作人员会听到用户的私人语音剪辑,例如妇女严重不合时宜地在浴缸里唱歌,或小孩在尖叫以寻求帮助。员工可以使用内部聊天室共享文件,解析模糊的单词或共享有趣的录音。

有时,员工会听到心烦甚至犯罪的录音。两名员工表示,他们已经听到了自己以为是性侵犯的消息,当发生这种情况时,他们会在内部聊天室大声说出来进行解压缩。

亚马逊表示,当员工听到痛苦的事情时,他们有标准的处理程序。但是两名罗马尼亚员工表示,当他们要求处理此类案件时,该公司告诉他们,干预此类事件不是亚马逊的工作。

“我们认真对待用户的个人信息和隐私安全。”亚马逊发言人在一封电子邮件声明中说:“我们将仅注释一小部分Alexa记录样本,以改善用户体验。例如,帮助我们训练语音识别和自然语言理解系统信息,以便Alexa可以更好了解用户需求并确保它可以为所有人提供良好的服务。”

“我们拥有严格的技术和运营保证,并对系统滥用采取零容忍政策。员工无法直接访问可以在工作过程中区分用户和帐户的信息。我们使用多重身份验证来限制访问,加密服务和审计我们的工作环境对所有信息高度保密。”

语焉不详的隐私政策

亚马逊在其宣传和隐私政策材料中并未明确指出Alexa获得的一些对话录音已被人类听过,但在FAQ列表中提到“我们使用您的Alexa命令来训练我们的语音识别和自然语言理解能力系统”。

在Alexa的隐私设置中,该公司为用户提供了禁用记录和开发新功能的选项。彭博社看到的屏幕截图显示,发送给工作人员的Alexa录音未提供用户的全名和地址,但与用户的帐号,名称和设备序列号相关联。

Google和Siri依靠人类员工来填补算法中的空白

亚马逊的圆柱形智能扬声器Echo于2014年推出后,由于能够在家中使用智能语音软件而迅速流行。不久之后,谷歌的母公司Alphabet推出了自己的Google Home版本,随后是苹果的HomePod,中国也有许多品牌的智能扬声器产品。

根据研究机构Canalys的一份报告,2018年,全球消费者购买了7800万个智能扬声器,其中有数百万消费者通过语音软件与智能手机上的智能助手进行交互。

大多数现代语音识别系统都依赖于模仿人脑的神经网络。该软件使用大量数据进行机器学习,从而为Echo和其他智能扬声器算法提供了可能性模型。如果用户询问Alexa附近是否有一个名为“希腊XX”的地方,该算法将自动知道用户正在寻找希腊餐厅,而不是教堂或社区中心。

但是Alexa经常犯错误,尤其是语,口语,方言和非英语语言。因此,亚马逊需要聘请人类员工来帮助填补算法中的空白。

实际上,除了亚马逊之外,其他品牌的语音助手也在人类的帮助下接受了培训。

苹果公司的Siri还得到了人类员工的帮助,他们负责评估语音助手对请求的解释是否与用户所说的相符。根据Apple的安全性白皮书,员工检查的Siri录音没有个人身份信息。录音将与一个随机标识符相关联,并存储六个月。在那之后,数据将从随机标识符中删除,但是它们也可以存储更长的时间。是时候改善Siri的语音识别了。

在Google,一些人类员工还可以获取Google Assistant的音频片段,以帮助培训和改进产品。这些音频也没有个人可识别的信息,并经过音频失真处理。

在今年四月为Google Home扬声器添加了人声识别之后,亚马逊也效仿了。根据Leifeng.com的说法,亚马逊最近宣布其智能助手Alexa也添加了类似功能,使其能够做出个性化响应,并将在未来几天内推出。这意味着不同的家庭成员将能够通过Alexa设备的语音识别获得个性化的体验。用户可以获取自己的新闻通讯,购物结果,新闻和音乐播放列表等。

亚马逊再现新技术突破,语音助手Alexa实现听声识人 Alexa为不同的用户提供个性化的响应

亚马逊表示,语音助手Alexa将“变得更加聪明”,其个性化响应将更加流行。例如,当一个小孩在家问Alexa问题时,Alexa将提供用户通常听的音乐播放列表。如果孩子的父母提出问题,Alexa将提供新闻通讯,日程安排提醒等。此功能的设置类似于在手机上设置Google Assistant或Siri。只要用户使用移动应用程序,就在设置中选择“您的语音”,然后可以通过读取指定的短语来设置Echo的语音识别,Alexa将使用此数据来创建语音配置文件。设置完成后,可以在用户的​​其他Echo设备和大多数第三方启用了Alexa的扬声器上使用配置文件。

据国外媒体报道,亚马逊Alexa目前拥有超过15,000种技能,远远超过其竞争对手Google Assistant和Microsoft Cortana。

亚马逊再现新技术突破,语音助手Alexa实现听声识人

就可用的技能类型而言,Flash Briefings仍然是Alexa最受欢迎的技能之一。新闻发布会的持续时间通常为90秒左右。用户只需要向Alexa说“ Alexa,给我今天的新闻简报”,Echo将尽快广播最新的新闻节目。并且据说这种信息技能是相对简单的开发。

根据极客公园从相关国内从业者那里获得的数据,在使用Alexa的所有用户中,有34%的人使用了音乐播放功能,有30%的人使用了灯光控制,有25%的人使用了定时功能,还有更多仍然具有一些基本的控制功能,并且出租车和购物等服务​​的使用并不占很大比例。至于使用场景,有50%在厨房,而Alexa的主要用户是家庭主妇。

亚马逊对Alexa的态度更加开放。根据Leifeng.com的说法,去年6月,亚马逊向开发人员开放了所有Alexa API,这使其得以流行并增长更快。

值得注意的是,亚马逊还专门设立了Alexa基金,计划投资1亿美元,资助那些中小企业和初创公司开发与Alexa相关的技术。音频制造商在2017年CES上表示,访问普通设备的Alexa芯片的成本很低,亚马逊还为他们提供了非常详细的指导,因此可以非常方便地完成开发工作。

亚马逊再现新技术突破,语音助手Alexa实现听声识人 亚马逊希望与苹果合作优化Alexa

亚马逊Alexa和Echo设备的副总裁Toni Reid表示,如果这项合作有助于Alexa语音助手的体验,那么亚马逊愿意与竞争对手苹果和谷歌合作。

强有力的合作始终是商业世界中必不可少的法则,但是除了拥有强大的合作伙伴之外,还必须招聘人才。托尼·里德(Toni Reid)还透露,亚马逊目前拥有5,000名员工,用于开发Echo智能扬声器和Alexa语音助手。但是,亚马逊的员工规模仍需要继续扩大,他们希望与全球最优秀的开发人员精英合作,以改善Alexa的功能。

为了开发Alexa语音购物系统,亚马逊将建立一个以色列研发中心

近年来,除了Apple,Microsoft和Facebook在以色列建立了研发基地外,Amazon也在这里活跃。 2015年1月,亚马逊收购了以色列芯片技术公司Annapurna Labs。该公司位于以色列北部城市约克内姆,拥有大约200名员工。除了其他亚马逊以外,这些人都从事AWS云计算服务的开发。研发项目。亚马逊最近还专注于Annapurna Labs的业务。

亚马逊再现新技术突破,语音助手Alexa实现听声识人

据雷锋网 (公众号:雷锋网) 据我了解,亚马逊上周宣布将在以色列建立两个研发中心,分别位于特拉维夫和北部沿海城市海法,拥有100名员工。亚马逊的举措是进一步升级其Alexa语音购物系统,以方便用户通过语音完成订单,节省打字并提高工作效率,并且“听和认识人”技术可以与语音购物系统结合使用。整合,更准确地增强人们的购物体验。

Leifeng.com获悉,亚马逊最近聘请了前微软以色列研发部门负责人Eyal Itah领导Alexa语音购物系统的开发。此外,雅虎前研究主管Yoelle Maarek还被任命为亚马逊国际研发副总裁。

亚马逊的声控购物业务副总裁阿萨夫·罗宁(Assaf Ronen)对这两位精英人士有很高的评价。他说:“我们决心利用以色列的才能继续发展研发团队。 You Aile和Eyal具有出色的能力和经验,他们可以带领新的研究人员和工程师团队为这些语音控制产品创造未来。”

对于Alexa,“语音交互技术是否成熟?”这种发声的声音经常出现在关注语音交互技术的人中。业内人士说,仅从语音识别的角度来看,仍有许多问题需要解决。例如,实现语音交互时要解决的第一件事是真实场景中的语音识别。必须考虑扬声器与机器之间的距离。如果机器可以识别用户在家中任何地方的语音命令,则需要考虑这一点。噪音,混响,回声和其他干扰声音的处理。尽管业内人士对此表示怀疑,但亚马逊继续取得新的技术突破,仍然值得我们关注和期待。

来自Leifeng.com的原创文章,禁止擅自转载。有关详细信息,请参见重印说明。

据报道,熟悉亚马逊的Alexa策略的人透露 亚马逊一直在开发高级语音识别功能,该功能允许其Echo智能扬声器中内置的Alexa语音助手可以根据语音识别用户的身份。 像Apple Siri和Microsoft Cortana一样,Alexa可以解释并响应各种语音命令,例如“今天的天气如何?”和“今晚可以看什么电影?”

但是到目前为止,没有主流的声控智能扬声器能够区分哪个家庭成员正在发出语音请求。消息人士称,亚马逊的新功能将与发布指令的人和语音样本(或“语音波纹”)相匹配,以确认其身份。主帐户所有者可以请求特定的语音波纹来访问特定的说明。例如,通过设置,用户可以进行诸如信用卡付款和通过回声打开咖啡机的操作,以提供父母的声音。

至少从2015年夏季开始,亚马逊就开始使用内部名称Voice ID开发该功能。直到去年夏季末,该功能仍在Alexa开发路线图上,但尚不清楚何时发布以及是否会发布。将实际启动。一位消息人士称,其基础技术已经开发出来,现在仅存在将此功能集成到Echo产品中的问题。多种因素可能会延迟或阻碍此功能的启动,包括隐私问题。对于亚马逊而言,隐私保护已成为一个主要问题。该公司最近拒绝将回声用户的声音记录交给去年11月调查谋杀案的阿肯色州警察,称此类记录应受美国宪法第一修正案的保护。

这项新技术有望为亚马逊意外流行的Echo产品线带来新的推动。自2014年推出Echo以来,亚马逊和第三方开发人员一直在迅速扩展智能扬声器的功能。 Alexa现在支持10,000种“技能”,例如与Uber和Capital One的服务兼容,这比今年1月的7,000和去年9月的3,000显着增加。亚马逊尚未透露Echo设备的销售数据,但摩根士丹利(Morgan Stanley)估计,截至去年12月,该产品的累计销售量已达到1100万。在今年的国际消费电子展(CES)上,Alexa还出现在从家用机器人到汽车信息娱乐系统的各种设备上。

亚马逊已允许Echo用户设置不同的配置文件并在它们之间切换,但是用户必须首先说“切换帐户”或使用Alexa应用程序进行切换。 Alexa应用程序还具有一些设置,要求用户大声说出四位数的验证码以确认信用卡付款。但是Alexa当前无法根据语音波纹识别经过身份验证的用户。

添加了语音ID功能,使与其他家庭成员或室友共享Echo的体验更加流畅和无缝。这也可以防止像梅根·内策尔(Megan Neitzel)一月份的经历那样的事情,当时她最初不知道她6岁的女儿布鲁克(Brooke)订购了一个高价的娃娃屋和四个磅饼干,直到将货物运到门口为止。除了购物和身份验证外,Alexa还可以知道谁在说话,还可以使其播放音乐更符合特定用户的口味。

如果语音ID技术成熟,那么Echo将比Google Home这样的设备具有竞争优势。尽管Google Assistant可以区分Pixel所有者是说“ OK Google”唤醒命令还是朋友和家人,但Google Home智能扬声器不具有此识别功能。科技行业研究公司Jackdaw Research的首席分析师Jan Dawson指出,此功能对于使用多个Amazon账户或希望保留单独的待办事项列表的家庭有用。但是,它可能能够为Google Home用户带来更多好处,因为与Amazon相比,用户更多地依赖Google的应用程序服务,例如日历和邮箱。 “除了购物习惯外,亚马逊不会收集有关您的很多信息。”道森说。

本文网址: http://www.amzkd.cn/p/2020822164543_9872_3688404116/home