AliCloudDenoise算法助力阿里云视频云实时会议进入超清音质时代

效果展示

适用场景

在线视频会议与通话

实时会议易受到办公室嘈杂人声、键盘声、环境空调声的干扰，可以使用AliCloudDenoise音频插件对纯净人声进行实时增强，提升RTC的通话体验。

实时视频直播

直播越来越普及化，直播地点也渐渐多样化，其中不乏市场、地铁站、景点、商场等喧闹的场所，通过使用AliCloudDenoise音频插件可以使主播的声音更加通透清晰，从而提升直播效果。

社交娱乐

社交娱乐场景中用户经常有环境隐私化的需求，AliCloudDenoise音频插件可以最大限度的去除环境中的背景噪声，提供更高质量的通话体验。

在线教育

应用于在线教学场景。教师及学生可通过AliCloudDenoise音频插件，清晰的进行语音交互，为教师和学生提供更佳的教与学体验。

支持平台

Windows、Mac、Android、IOS

Windows端 AliCloudDenoise 音频增强插件集成

以下介绍如何在Windows平台集成AliCloudDenoise插件。

前提条件

环境中已安装Visual Studio 2010或以上版本。

环境要求

Windows端具体环境要求，更多信息，请参见各平台SDK的使用限制。​

操作步骤

1. 创建Visual Studio项目。

2. 集成阿里云RTC SDK，具体操作，请参见集成客户端SDK。

1. 集成AliCloudDenoise音频智能增强组件。

   1. 下载并解压音频智能增强组件，下载地址，请参见组件下载。

   2. 复制库文件至程序的执行路径下。

      1. 如果系统为32位，请将x86目录下的pluginAliDenoise.dll 和 MNN.dll 文件复制到程序的执行路径下。

      2. 如果系统为32位，请将x86目录下的pluginAliDenoise.dll 和 MNN.dll 文件复制到程序的执行路径下。

1. 编译。如果编译成功，表示音频智能增强组件集成成功。

功能实现

您可以通过调用EnablePlugin接口使用音频智能增强功能，如下所示（C++代码）：

int select_plugin_type = (AliRtcPluginDataTypeAudio.ordinal() << 16) + AliRtcPluginPreOperation.ordinal(); 
mAliRtcEngine.enablePlugin("pluginAliDenoise", "pluginAliDenoise", select_plugin_type, 0, new byte[]{0}); 

Mac端 AliCloudDenoise 音频增强插件集成

以下介绍如何在Mac平台集成AliCloudDenoise插件。

​

前提条件

• 环境中已安装Xcode 9.0或以上版本，更多信息，请参见Xcode。

• 您需要持有Apple开发证书或个人账号。

• 如果使用Mac mini等不包含自带摄像头和麦克风的设备，需要插入外置摄像头和麦克风。

环境要求

Mac端具体环境要求，更多信息，请参见各平台SDK的使用限制。

操作步骤

1. 创建Xcode项目。

2. 集成阿里云RTC SDK，具体操作，请参见集成客户端SDK。

   说明

   需要集成RTC SDK 2.4及以上版本，详情请参见SDK下载。

3. 集成AliCloudDenoise音频智能增强组件。

   1. 下载并解压音频智能增强组件，下载地址，请参见组件下载。

   2. 复制pluginAliDenoise.framework 和 libMNN.dylib文件至工程中。

   3. 在General页签中，在Frameworks, Libraries, and Embedded Content区域中添加pluginAliDenoise.framework和libMNN.dylib，并将对应的Embed属性设置成Embed & Sign。

4. 按Commond+B，如果界面提示Build Success，表示音频智能增强组件集成成功。

备注

如遇archive APP失败，可在General->Build Settings->Signing->Other Code Signing Flags页签中添加--deep，保存重新尝试。

功能实现

您可以通过调用enablePlugin接口使用音频智能增强功能，如下所示（Objective-C代码）：

long select_plugin_type = AliRtcPluginPreOperation + (AliRtcPluginDataTypeAudio << 16);
int ret = [self.engine enablePlugin:@"pluginAliDenoise" pluginName:@"pluginAliDenoise" pluginType:(int)select_plugin_type opType:0 option:NULL];

​

Android端 AliCloudDenoise 音频增强插件集成

以下介绍如何在Android平台集成AliCloudDenoise插件。

前提条件

环境中已安装Android Studio 3.0或以上版本，更多信息，请参见Android Studio。

环境要求

Android NDK为14或以上版本，其他环境要求，更多信息，请参见各平台SDK的使用限制。

操作步骤

1. 创建Android studio项目，具体操作，请参见Android Developers。

2. 集成阿里云RTC SDK，具体操作，请参见集成客户端SDK。

   说明

   需要集成RTC SDK 2.4及以上版本，详情请参见SDK下载。

3. 集成AliCloudDenoise音频智能增强组件。

   1. 下载并解压音频智能增强组件，下载地址，请参见组件下载。

   2. 复制相应架构（arm64-v8a 或 armeabi-v7a）文件夹下的libpluginAliDenoise.so 、 libMNN.so 及libMNN_Express.so 文件至App模块下的libs文件夹中。

1. 编译。如果编译成功，表示音频智能增强组件集成成功。

功能实现

您可以通过调用enablePlugin接口使用音频智能增强功能，如下所示（Java代码）：

int select_plugin_type = (AliRtcPluginDataTypeAudio.ordinal() << 16) + AliRtcPluginPreOperation.ordinal();
mAliRtcEngine.enablePlugin("pluginAliDenoise", "pluginAliDenoise", select_plugin_type, 0, null);

IOS端 AliCloudDenoise 音频增强插件集成

以下介绍如何在IOS平台集成AliCloudDenoise插件。

前提条件

• 环境中已安装Xcode 9.0或以上版本，更多信息，请参见Xcode。

• 您需要持有Apple开发证书或个人账号。

环境要求

iOS端具体环境要求，更多信息，请参见各平台SDK的使用限制。

操作步骤

1. 创建Xcode项目。

2. 集成阿里云RTC SDK，具体操作，请参见集成客户端SDK。

   说明

   需要集成RTC SDK 2.4及以上版本，详情请参见SDK下载。

3. 集成AliCloudDenoise音频智能增强组件。

   1. 下载并解压音频智能增强组件，下载地址，请参见组件下载。

   2. 复制pluginAliDenoise.framework 文件至工程中。

   3. 在General页签中，在Frameworks, Libraries, and Embedded Content区域中添加pluginAliDenoise.framework，并将对应的Embed属性设置成Embed & Sign。

1. 按Commond+B，如果界面提示Build Success，表示音频智能增强组件集成成功。

功能实现

您可以通过调用enablePlugin接口使用音频智能增强功能，如下所示（Objective-C代码）：

long select_plugin_type = AliRtcPluginPreOperation + (AliRtcPluginDataTypeAudio << 16);
int ret = [self.engine enablePlugin:@"pluginAliDenoise" pluginName:@"pluginAliDenoise" pluginType:(int)select_plugin_type opType:0 option:NULL];

附录

资源占用

机型适配报告