uni-app语音转文字功能demo(小程序同声翻译开箱即用)

简介: uni-app语音转文字功能demo(小程序同声翻译开箱即用)



一、同声翻译插件的申请











点击小程序管理后台后,再次点击设置,选中第三方服务



搜索同声传译,将插件添加至自己的小程序服务中

点击详情可看到官方文档及AppId(后续使用中会用到)


二、uni-app中的引用


 

新建项目后,选中manifest.json文件,切换至源码视图(右侧菜单栏最下方!)


在mp--weixin的appid(千万别看错了,上方还有一个AppID)同级下写插件的相关信息

"mp-weixin": {
    /* 小程序特有相关 */
    "appid": "你自己的小程序id",
    "plugins": {
      "WechatSI": {
        "version": "0.3.3",
        "provider": "wx069ba97219f66d99"
      }
    },
    "setting": {
      "urlCheck": false
    },
    "usingComponents": true
  },

特别注意!!!!!!!!!!version版本最好是0.3.3,高于此版本可能会无法使用,并且provider应该都是这个,所以复制即用!

<template>
  <view>
    <!-- 语音识别区 -->
    <!-- 语音内容图片+转文字,没有语音时是隐藏状态 -->
    <view class="content" v-if="shows">
      <!-- 语音声纹图片 -->
      <view class="tet" style="position: relative;">
        <view style="position: absolute;width: 30px;height: 30px;background-color: #e9c2db;right: 0;border-radius: 50%;top: 10px;" :class="num == 1 ? '' : 'op'">
          <!-- 转文字按钮  fanyi为转译事件 -->
          <image style="width: 30px;height: 30px;" src="https://pic.imgdb.cn/item/64c85b431ddac507cc0e7284.png" @tap="fanyi"></image>
        </view>
      </view>
      <!-- 翻译内容点击fanyi后出现 -->
      <view class="voicepad" style="margin-top: 20px;width: 94%;margin-left: 3%;padding: 10px; font-size: 12px;">
        {{endOne}}
      </view>
    </view>
    <!-- 语音音阶动画 长按说话时的动画 -->
    <view class="prompt" v-if="animation">
      <section class="dots-container">
        <view class="dot"></view>
        <view class="dot"></view>
        <view class="dot"></view>
        <view class="dot"></view>
        <view class="dot"></view>
      </section>
      <text>录音中...</text>
    </view>
    <!-- 按钮功能区 -->
    <view class="action" v-show="!shows">
      <!-- 开始录音按钮  长按录音  松手上传 text为-----开始录音----上传录音文字 -->
      <button @longpress="startRecord" @touchend="endRecord" @tap="startRecord">{{text}}</button>
    </view>
    <view class="actioning" v-show="shows">
      <button @tap="playVoice" style="background-color: #d1f2d7;color: #18bc37;">播放录音</button>
      <button @tap="resetVoice" style="background-color: #fdedd9;color: #f3a73f;">重置录音</button>
    </view>
  </view>
</template>
<script>
  // 录音播放事件引入
  const innerAudioContext = uni.createInnerAudioContext();
  innerAudioContext.autoplay = true;
  // 翻译事件引入
  var plugin = requirePlugin("WechatSI")
  let manager = plugin.getRecordRecognitionManager()
  export default {
    data() {
      return {
        text: '开始录音',
        voicePath: '',
        // 音频展示
        shows: false,
        // 动画状态
        animation: false,
        voiceState: "点击录音进行翻译",
        endOne: '',
        num: 1
      }
    },
    onShow() {
    },
    onLoad() {
      // 初始化调用
      this.initRecord();
    },
    methods: {
      startRecord() {
        console.log('开始录音');
        manager.start({
          duration: 30000,
          lang: "zh_CN"
        })
        this.text = '松手上传';
        this.animation = true
      },
      endRecord() {
        console.log('录音结束');
        this.text = '开始录音';
        this.animation = false
        this.shows = true
        manager.stop();
      },
      playVoice() {
        console.log('播放录音');
        if (this.voicePath) {
          innerAudioContext.src = this.voicePath;
          innerAudioContext.play();
        }
      },
      resetVoice() {
        console.log('重置录音');
        innerAudioContext.stop();
        this.shows = false
        this.voicePath = '';
        this.endOne = ''
        this.voiceState = ''
        this.num = 1
      },
      fanyi() {
        if (this.num == 1) {
          console.log(this.voicePath);
          this.endOne = this.voiceState
          this.num = this.num + 1
          uni.showToast({
            title: '转换成功',
            icon: 'success',
            duration: 2000, //持续时间为 2秒
          })
        }else{
          uni.showToast({
            title: '文字已翻译,请勿重复点击',
            icon: 'error',
            duration: 2000, //持续时间为 2秒
          })
        }
      },
      /**
       * 初始化语音识别回调  
       * 绑定语音播放开始事件  
       */
      initRecord: function() {
        manager.onStart = function(res) {
          this.voiceState = "onStart:" + res.msg + "正在录音"
        };
        //有新的识别内容返回,则会调用此事件  
        manager.onRecognize = (res) => {
          this.voiceState = res.result;
        }
        // 识别结束事件  
        manager.onStop = (res) => {
          this.voicePath = res.tempFilePath;
          this.voiceState = res.result;
          if (this.voiceState == '') {
            console.log('没有说话')
            this.endOne = '周围太安静啦~再试试~';
          }
        }
        // 识别错误事件  
        manager.onError = (res) => {
          this.voiceState = '翻译员去吃饭啦,等下再试试';
          this.shows = false
          uni.showToast({
            title: '翻译员去吃饭啦,等下再试试',
            icon: 'error',
            duration: 2000, //持续时间为 2秒
          })
        }
      },
    }
  }
</script>
<style>
  .content {
    box-sizing: border-box;
    width: 98%;
    margin-left: 1%;
    min-height: 300px;
    padding-top: 20px;
    padding-left: 15px;
    padding-right: 15px;
    padding-bottom: 20px;
    display: flex;
    flex-direction: column;
    align-items: center;
  }
  .tet {
    width: 100%;
    height: 50px;
    margin-top: 25px;
    border-radius: 30px;
    background-repeat: no-repeat;
    background-size: 100% 100%;
    background-image: url('https://pic.imgdb.cn/item/64c85a901ddac507cc0d52a4.png');
    position: relative;
  }
  .action {
    position: fixed;
    bottom: 20px;
    width: 100%;
  }
  .action button {
    background-color: #d1f2d7;
    color: #18bc37;
    font-size: 14px;
    display: flex;
    height: 40px;
    width: 96%;
    margin-left: 2%;
    align-items: center;
    justify-content: center;
  }
  .actioning {
    position: fixed;
    bottom: 20px;
    width: 100%;
    display: flex;
    align-items: center;
    justify-content: space-between;
  }
  .actioning button {
    height: 40px;
    width: 45%;
    border: 0;
    font-size: 14px;
    display: flex;
    align-items: center;
    justify-content: center;
  }
  .bbig {
    width: 94%;
  }
  .op{
    visibility: hidden;
  }
  /* 动画 */
  .prompt {
    width: 100%;
    height: 80px;
    position: fixed;
    bottom: 70px;
  }
  .prompt text {
    position: absolute;
    bottom: 2px;
    color: #f3a73f;
    left: calc(45%);
    animation: puls 1.5s infinite ease-in-out;
  }
  .dots-container {
    display: flex;
    align-items: center;
    justify-content: center;
    height: 80px;
    width: 45%;
    position: absolute;
    bottom: 0px;
    left: calc(27.5%);
    background-color: #fdedd9;
    border-radius: 20px;
  }
  .dot {
    height: 16px;
    width: 16px;
    margin-right: 10px;
    border-radius: 10px;
    background-color: #f3a73f;
    animation: pulse 1.5s infinite ease-in-out;
  }
  .dot:last-child {
    margin-right: 0;
  }
  .dot:nth-child(1) {
    animation-delay: -0.3s;
  }
  .dot:nth-child(2) {
    animation-delay: -0.1s;
  }
  .dot:nth-child(3) {
    animation-delay: 0.1s;
  }
  @keyframes pulse {
    0% {
      transform: scale(0.8);
      background-color: #f3a73f;
      box-shadow: 0 0 0 0 rgba(243, 167, 63, 0.7);
    }
    50% {
      transform: scale(1.2);
      background-color: #f9d39f;
      box-shadow: 0 0 0 10px rgba(178, 212, 252, 0);
    }
    100% {
      transform: scale(0.8);
      background-color: #f3a73f;
      box-shadow: 0 0 0 0 rgba(243, 167, 63, 0.7);
    }
  }
  @keyframes puls {
    0% {
      transform: translateY(0px)
    }
    50% {
      transform: translateY(-4px)
    }
    100% {
      transform: translateY(0px)
    }
  }
</style>

至此同声翻译就可以使用了,本文主要使用的是录音完毕后,提供播放录音及翻译录音两个选项,也可以改动后支持同声同步翻译。


demo复制即可使用,只需要修改图片,如果真机运行报错,建议切换真机1.0进行测试。

相关实践学习
达摩院智能语音交互 - 声纹识别技术
声纹识别是基于每个发音人的发音器官构造不同,识别当前发音人的身份。按照任务具体分为两种: 声纹辨认:从说话人集合中判别出测试语音所属的说话人,为多选一的问题 声纹确认:判断测试语音是否由目标说话人所说,是二选一的问题(是或者不是) 按照应用具体分为两种: 文本相关:要求使用者重复指定的话语,通常包含与训练信息相同的文本(精度较高,适合当前应用模式) 文本无关:对使用者发音内容和语言没有要求,受信道环境影响比较大,精度不高 本课程主要介绍声纹识别的原型技术、系统架构及应用案例等。 讲师介绍: 郑斯奇,达摩院算法专家,毕业于美国哈佛大学,研究方向包括声纹识别、性别、年龄、语种识别等。致力于推动端侧声纹与个性化技术的研究和大规模应用。
相关文章
|
1月前
|
JSON 小程序 JavaScript
uni-app开发微信小程序的报错[渲染层错误]排查及解决
uni-app开发微信小程序的报错[渲染层错误]排查及解决
477 7
|
1月前
|
小程序 JavaScript 前端开发
uni-app开发微信小程序:四大解决方案,轻松应对主包与vendor.js过大打包难题
uni-app开发微信小程序:四大解决方案,轻松应对主包与vendor.js过大打包难题
529 1
|
18天前
|
NoSQL 应用服务中间件 PHP
布谷一对一直播源码服务器环境配置及app功能
一对一直播源码阿里云服务器环境配置及要求
|
17天前
|
小程序 数据挖掘 UED
开发1个上门家政小程序APP系统,都有哪些功能?
在快节奏的现代生活中,家政服务已成为许多家庭的必需品。针对传统家政服务存在的问题,如服务质量不稳定、价格不透明等,我们历时两年开发了一套全新的上门家政系统。该系统通过完善信用体系、提供奖励机制、优化复购体验、多渠道推广和多样化盈利模式,解决了私单、复购、推广和盈利四大痛点,全面提升了服务质量和用户体验,旨在成为家政行业的领导者。
|
1月前
|
存储 自然语言处理 小程序
微信小程序多语言切换神器:简繁体切换功能完全指南
随着全球化的发展,支持多种语言的应用程序愈发重要。本文介绍了如何在微信小程序中实现简体与繁体字体之间的切换功能,以满足不同地区用户的需求。通过创建utils文件夹并编写相应的转换函数,开发者可以方便地实现语言切换,从而提升用户体验。文章中还附带了示例代码和效果图,帮助读者更好地理解和应用这一功能。
85 0
微信小程序多语言切换神器:简繁体切换功能完全指南
|
1月前
|
缓存 小程序 索引
uni-app开发微信小程序时vant组件van-tabs的使用陷阱及解决方案
uni-app开发微信小程序时vant组件van-tabs的使用陷阱及解决方案
189 1
|
14天前
|
机器人
布谷直播App系统源码开发之后台管理功能详解
直播系统开发搭建管理后台功能详解!
|
1月前
|
小程序 JavaScript API
微信小程序开发之:保存图片到手机,使用uni-app 开发小程序;还有微信原生保存图片到手机
这篇文章介绍了如何在uni-app和微信小程序中实现将图片保存到用户手机相册的功能。
536 0
微信小程序开发之:保存图片到手机,使用uni-app 开发小程序;还有微信原生保存图片到手机
|
1月前
|
JavaScript 小程序 开发者
uni-app开发实战:利用Vue混入(mixin)实现微信小程序全局分享功能,一键发送给朋友、分享到朋友圈、复制链接
uni-app开发实战:利用Vue混入(mixin)实现微信小程序全局分享功能,一键发送给朋友、分享到朋友圈、复制链接
316 0
|
1月前
|
小程序
uni-app开发微信小程序使用onPullDownRefresh(下拉刷新)总结
uni-app开发微信小程序使用onPullDownRefresh(下拉刷新)总结
474 0