微信小程序口令红包

我会带着你远行 2022-02-01 13:06 251阅读 0赞

思路：

1.  使用小程序录音API服务，建立录音文件。
2.  后台调用百度在线语音识别API接口，转换语音为文字。
3.  后台调用百度短文本相似度API接口，比对原始文本与语音文本的相似度。
4.  根据第三步的相似度决定是否抽红包。

实现：

1、使用小程序录音API服务，建立录音文件。

> 小程序文档：[全局唯一的录音管理器][Link 1]

2、小程序代码

<view>
          "黑灰化肥会挥发发灰黑讳为花飞；灰黑化肥会挥发发黑灰为讳飞花"
    </view>
    <button class='btn' style='background:{
       {bg}}' bindtouchstart="handleTouchStart" bindtouchend="handleTouchEnd">
          <image src='https://www.zlye.com/10/voice.png'></image>
          <text>{
       {touchStartText}}</text>
    </button>

3、配置Centos7环境，安装音视频转码软件ffmpeg，具体安装步骤参考推荐文章。

> FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。采用LGPL或GPL许可证。它提供了录制、转换以及流化音视频的完整解决方案。
> 
> [【linux】ffmpeg 安装教程][linux_ffmpeg]
> 
> [ffmpeg发行版本列表][ffmpeg]
> 
> [当前使用版本ffmpeg-4.1.tar.gz][ffmpeg-4.1.tar.gz]

4、后台代码

Controller层方法

@PostMapping("/verifyVoice")
    public xxx verifyVoice(MultipartRequest request){
        //调用Service层方法
        xxx.verifyVoice(request);
    }

Service层方法

> 百度在线语音识别API接口，转换语音为文字。
> 
> 百度开放平台文档：[在线语音识别][Link 2]

@Override
    public xxx verifyVoice(MultipartHttpServletRequest request) {
    		logger.debug(">>>>开始语音识别");
    		MultipartFile fileDetail = request.getFile("file");
    		String fileName = System.currentTimeMillis() + ".mp3";
    		String path = "/opt/service/";
    		File file = new File(path);
    		if (!file.exists() && !file.isDirectory()) {
    			file.mkdirs();
    		}
    
    		RandomAccessFile randomFile = null;
    		try {
    			randomFile = new RandomAccessFile(path + fileName, "rw");
    			randomFile.seek(randomFile.length());
    			randomFile.write(fileDetail.getBytes());
    		} catch (IOException e) {
    			e.printStackTrace();
    		} finally {
    			try {
    				randomFile.close();
    			} catch (IOException e) {
    				e.printStackTrace();
    			}
    		}
    
    		String res = null;
    
    		try {
    			String filePath = zm(path, fileName);
    			File f = new File(filePath);
    			for(int i=0;i<100000;i++){
    				if(f.exists()){
    					res = sb(filePath);
    					//识别完毕删除文件
    					final String fName = fileName.split("\\.")[0];
    					final String p = path;
    					break;
    				}
    			}
    			String fName = fileName.split("\\.")[0];
    			String p = path;
    			File f1 = new File(p+fName+".mp3");
    			File f2 = new File(p+fName+".pcm");
    			f1.delete();
    			f2.delete();
    			System.out.println("语音识别结果="+res);
    		} catch (Exception e) {
    			System.out.println("语音识别失败");
    			e.printStackTrace();
    		}
    		if(StringUtils.isBlank(res)){
    			return null;
    		}
    		res = res.trim();
    	    return null;
    }
    	
    public String zm(String path, String fileName) throws IOException, InterruptedException {
    		String zmName = fileName.split("\\.")[0] + ".pcm";
    		String ffmpegPath = "/monchickey/ffmpeg/bin/";
    		String cmd = ffmpegPath+"ffmpeg -y -i "+path+fileName+" -acodec pcm_s16le -f s16le -ac 1 -ar 16000 "+path+zmName;
    		try {  
                String[] cmdA = { "/bin/sh", "-c", cmd };  
                Process process = Runtime.getRuntime().exec(cmdA);  
                LineNumberReader br = new LineNumberReader(new InputStreamReader(process.getInputStream()));  
                StringBuffer sb = new StringBuffer();  
                String line;  
                while ((line = br.readLine()) != null) {  
                    System.out.println(line);  
                    sb.append(line).append("\n");  
                }  
                System.out.println(sb.toString());  
            } catch (Exception e) {  
                e.printStackTrace();  
            } 
    		logger.debug("zm返回值"+path+zmName);
    		return path+zmName;
    }
    	
    public static String sb(String filePath) throws JSONException, InterruptedException{
    		String string = "";
    		try {
    		// 初始化一个AipSpeech
    		AipSpeech client = new AipSpeech("xxxx", "yyyy", "zzzz");
    		// 可选：设置网络连接参数
    		client.setConnectionTimeoutInMillis(2000);
    		client.setSocketTimeoutInMillis(60000);
    		// 调用接口
    		JSONObject res = client.asr(filePath, "pcm", 16000, null);
    		string = res.toString(2);
    		}catch (Exception e) {
    		}
    		return string;
    }

> 注意：
> 
> //项目部署路径
> 
> String path = "/opt/service/";
> 
> //步骤3中安装的音视频转码软件ffmpeg的位置
> 
> String ffmpegPath = "/monchickey/ffmpeg/bin/";
> 
> // 初始化一个AipSpeech  
> AipSpeech client = new AipSpeech("xxxx", "yyyy", "zzzz");
> 
> 替换为自己的百度开放平台授权信息。

百度短文本相似度API接口

> 百度开放平台文档：[短文本相似度接口][Link 3]

具体语音转文字后的相似度逻辑改造上面代码：

> System.out.println("语音识别结果="+res);

[Link 1]: https://developers.weixin.qq.com/miniprogram/dev/api/RecorderManager.html
[linux_ffmpeg]: https://blog.csdn.net/TXX_c/article/details/83548348
[ffmpeg]: http://ffmpeg.org/releases/
[ffmpeg-4.1.tar.gz]: http://ffmpeg.org/releases/ffmpeg-4.1.tar.gz
[Link 2]: https://cloud.baidu.com/doc/SPEECH/ASR-Online-Java-SDK.html#.E7.AE.80.E4.BB.8B
[Link 3]: https://cloud.baidu.com/doc/NLP/NLP-API.html#.9B.EF.6A.4F.BE.F7.B8.EF.B0.CC.A3.4A.62.3B.C5.00