隐语团队研究成果再创佳绩,两篇论文分别被USENIX ATC'23和IJCAI'23接收!

简介: 隐语团队研究成果再创佳绩,两篇论文分别被USENIX ATC'23和IJCAI'23接收!


‍“USENIX ATC‍年度技术会议”(USENIX ATC,USENIX Annual Technical Conference)是计算机系统领域的顶级学术会议之一。本年度 USENIX ATC'23将于7月10日至12日在美国波士顿召开。本次会议共投稿353篇论文,接收65篇,接收率为18.4%。蚂蚁集团隐私计算部隐语团队关于基于多方安全计算(MPC)的隐私保护机器学习框架 SPU 的论文被接收。论文题目:SecretFlow-SPU: A Performant and User-Friendly Framework for Privacy-Preserving Machine LearningMPC 技术在上世纪八十年代被姚期智院士提出,当前已经被广泛地应用在了隐私保护机器学习领域,提供安全可证的机器学习建模和推理方案。当前,如 MP-SPDZ、TF-Encrypted 等框架为开发者提供了自定义或模仿传统机器学习框架的接口来编写隐私保护机器学习程序。与已有工作不同,SPU 采用编译器/运行时的技术路线来更自然地构建从机器学习世界到 MPC 世界的桥梁。仅通过少量代码修改,SPU 可以以 MPC 方式运行存量机器学习程序。同时,通过前端的计算图编译优化以及后端高性能的工程实现,SPU 在三方半诚实协议的测评场景下计算性能大幅优于相关工作。

论文信息如下:

Junming Ma, Yancheng Zheng, Jun Feng, Derun Zhao, Haoqi Wu, Wenjing Fang, Jin Tan, Chaofan Yu, Benyu Zhang, Lei Wang. SecretFlow-SPU: A Performant and User-Friendly Framework for Privacy-Preserving Machine Learning. USENIX Annual Technical Conference, Boston, MA, USA, July 2023.

USENIX ATC'23 官网:

https://www.usenix.org/conference/atc23


2023年人工智能顶会“IJCAI”(International Joint Conferences on Artificial Intelligence)将于2023年8月19日在中国澳门召开。IJCAI'23是人工智能领域的重要学术会议之一,本次共投稿4566篇论文,接收率为15%。蚂蚁集团隐私计算部隐语团队有一篇语音意图理解的隐私保护论文被接收。

论文题目:Privacy-Preserving End-to-End Spoken Language Understanding

SLU(Spoken Language Understanding)作为物联网设备中人机交互的关键技术之一被广泛应用于车载助手、手机语音助手、智能家居等场景,但是人类的语音中包含很多的用户敏感信息,比如性别、身份、内容,因此出现了新的安全和隐私泄漏问题。由于用户不想将个人的敏感信息暴露在不受信任的第三方的恶意攻击之下,所以,SLU系统应该在本身识别准确率不受影响的情况下,能保证潜在的恶意攻击者无法推理出用户的敏感属性。现有的针对隐私保护的主要手段—对抗训练和解耦表达都存在自身的问题,前者会降低SLU系统的识别准确率,后者无法全面地保护用户敏感信息且模型参数量会有较大提升。

为了解决SLU隐私保护问题本论文提出了一个新颖的SLU多任务隐私保护模型,以防止语音识别(ASR)和身份识别(IR)两种攻击,该模型运用隐层分离技术使得SLU信息只分布在隐层的特定维度,而其他两种信息从该部分中剔除,从而得到隐私安全的分离隐层。为了能够保证效率和隐私的平衡性,我们又引入了模型预训练的机制。再者我们联合对抗训练以进一步保护用户的隐私。实验结果表明,我们提出的算法在意图理解任务上平均精度比业界SOTA方法高1-2个百分点,与明文时的差距小于1个百分点;平均处理时效和明文时的性能相当;不仅能够保护说话内容还能保护声纹ID信息;提出的保护方法可根据不同的任务要求,灵活处理要保护的内容。

论文信息如下:
Yinggui Wang, Wei Huang, Le Yang, Lei Wang. Privacy-Preserving End-to-End Spoken Language Understanding . IJCAI, Macao, China, August 2023.

IJCAI'23 官网:https://ijcai-23.org

相关文章
|
5月前
|
机器学习/深度学习 人工智能 自然语言处理
大模型最强架构TTT问世!斯坦福UCSD等5年磨一剑, 一夜推翻Transformer
【7月更文挑战第21天】历经五年研发,斯坦福、UCSD等顶尖学府联合推出TTT架构,革新NLP领域。此架构以线性复杂度处理长序列,增强表达力及泛化能力,自监督学习下,测试阶段动态调整隐藏状态,显著提升效率与准确性。实验显示,TTT在语言模型与长序列任务中超越Transformer,论文详述于此:[https://arxiv.org/abs/2407.04620](https://arxiv.org/abs/2407.04620)。尽管如此,TTT仍需克服内存与计算效率挑战。
178 2
|
2月前
|
消息中间件 Apache 云计算
阿里云消息团队创新论文被软件工程顶会 FM 2024 录用
此论文灵感来源于 RocketMQ 适配阿里云倚天 CPU 的性能优化过程中。RocketMQ 此前在发送消息的过程中存在两种锁:自旋锁和互斥锁。本文旨在提出一种新的自适应 K 值退避锁,能够让高并发系统的部署者无需考虑两种锁的优劣势,只需使用一把锁即可实现性能的最优以及最低的资源损耗。
|
7月前
|
域名解析 负载均衡 网络协议
阿里云基础设施网络研发团队参与论文获得CCS 2023 杰出论文奖
阿里云基础设施网络研发团队参与论文获得CCS 2023 杰出论文奖
|
存储 JSON 人工智能
送给大模型的「高考」卷:442人联名论文给大模型提出204个任务,谷歌领衔
送给大模型的「高考」卷:442人联名论文给大模型提出204个任务,谷歌领衔
174 0
送给大模型的「高考」卷:442人联名论文给大模型提出204个任务,谷歌领衔
|
存储 Cloud Native 容灾
再创佳绩!阿里云4篇论文入选顶会FAST 2023
再创佳绩!阿里云4篇论文入选顶会FAST 2023
530 0
|
人工智能 安全 算法
可信联邦学习线上分享:杨强教授带领四篇论文解读最前沿研究
可信联邦学习线上分享:杨强教授带领四篇论文解读最前沿研究
|
机器学习/深度学习 人工智能 算法
谷歌大牛Jeff Dean单一作者撰文:深度学习研究的黄金十年
谷歌大牛Jeff Dean单一作者撰文:深度学习研究的黄金十年
146 0
|
机器学习/深度学习 算法
搞强化学习还不了解AutoRL,牛津大学、谷歌等十余位学者撰文综述
搞强化学习还不了解AutoRL,牛津大学、谷歌等十余位学者撰文综述
126 0
|
机器学习/深度学习 人工智能 自然语言处理
CVPR 2021大奖公布!何恺明获最佳论文提名,代码已开源!
深度生成模型可以在高分辨率下进行逼真的图像合成。但对于许多应用来说,这还不够:内容创作还需要可控。虽然最近有几项工作研究了如何分解数据中的潜在变化因素,但它们大多在二维中操作,忽略了我们的世界是三维的。
CVPR 2021大奖公布!何恺明获最佳论文提名,代码已开源!
|
机器学习/深度学习 人工智能 自然语言处理
NIPS大会最精彩一日:AlphaZero遭受质疑;史上第一场正式辩论与LeCun激情抗辩;元学习&强化学习亮点复盘
美国时间周四,NIPS 大会走完了日程的一半。工业界的众多公司搬东西撤出了展览会场,受邀演讲也全部结束。之后亮点除了当地时间周五周六的 Workshop 以外,就是周四下午的四场重要的研讨会——从元学习和深度强化学习,到 DeepMind 刚刚公布的 AlphaZero,以及 Yann LeCun 参加了 NIPS 史上第一次辩论,一天的精彩内容尽在此文中。
231 0
NIPS大会最精彩一日:AlphaZero遭受质疑;史上第一场正式辩论与LeCun激情抗辩;元学习&强化学习亮点复盘
下一篇
DataWorks