Unity 实现人工智能语音
Unity 实现人工智能语音
- 欧拉密SDK 下载
- 欧拉密基础教学
-
- 欧拉密 NLI管理系统
- 自定义模块
- Unity 模块
-
- 文件导入
- 项目创建
- ASR 代码模块
-
- NluApiSample
- ASR 语音合成
- 人工智能语音播放
- 人工智能语音 Json 数据支持
- 搭载运行
欧拉密SDK 下载
欧拉密SDK 下载 地址 : 欧拉密SDK
欧拉密SDK 下载 并解压 会得到这四个文件夹 根据需求使用相应的 .dll 库
欧拉密基础教学
欧拉密官方网站
注册账号之后点击应用管理模块
点击创建新应用
根据提示创建你的应用
配置对话模块 默认全部勾选 注意保存设置
可以查看 欧拉密 Key 和 Secret 值
欧拉密 NLI管理系统
自定义模块
打开 欧拉密 NLI管理系统
点击我的语法
新建自定义语法
注意编写格式 回答模块包括 语音回答和自定义回答两种模式
编写格式
编写完成后注意保存
点击发布 发布之后才可以使用
如果不满意 可以在再次编辑
编辑完成注意保存和发布
返回应用管理 并点击配置模块
勾选自定义回答模块 保存设置 自定义回答模块就完成了
Unity 模块
文件导入
新建一个项目工程 并在 Assets 路径下新建一个 Plugins的文件夹
并把 AipSdk.dll Newtonsoft.Json.dll 拖入
项目创建
基础创建
音源创建
脚本搭载
ASR 代码模块
特别说明：如果想要使用欧拉密的相关模块，需要去欧拉密官方网站进行项目配置，默认创建的项目是全部勾选的
如果想要自定义配置的话需要自己手动配置并发布，才可以正常使用。
特别注意：百度的文字转语音API是免费的，但是语音识别转文字是需要付费使用的哟。
NluApiSample
如果脚本 《ASR_ZH》 using Ai.Olami.Example; 引用报错就把这个代码添加到你的项目里面。
/*
Copyright 2017, VIA Technologies, Inc. & OLAMI Team.
Licensed under the Apache License, Version 2.0 (the "License");
you may not use this file except in compliance with the License.
You may obtain a copy of the License at
http://www.apache.org/licenses/LICENSE-2.0
Unless required by applicable law or agreed to in writing, software
distributed under the License is distributed on an "AS IS" BASIS,
WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
See the License for the specific language governing permissions and
limitations under the License.
*/
using System;
using System.Text;
using System.Net;
using System.IO;
using System.Collections.Specialized;
using System.Security.Cryptography;
namespace Ai.Olami.Example
{
class NluApiSample
{
public static string API_NAME_SEG = "seg";
public static string API_NAME_NLI = "nli";
private string _ApiBaseUrl;
private string _AppKey;
private string _AppSecret;
/// 识别结果
public string GetRecognitionResult(string _ApiName, string _InputText)
{
string _Result;
double _Timestamp = Convert.ToInt64((DateTime.Now.ToUniversalTime() - new DateTime(1970, 1, 1, 0, 0, 0)).TotalMilliseconds);
// 准备消息以生成MD5摘要
StringBuilder _SignMsg = new StringBuilder()
.Append(_AppSecret)
.Append("api=")
.Append(_ApiName)
.Append("appkey=")
.Append(_AppKey)
.Append("timestamp=")
.Append(_Timestamp)
.Append(_AppSecret);
// 生成MD5摘要
MD5 _Md5 = MD5.Create();
StringBuilder _Sign = new StringBuilder();
byte[] _Hash = _Md5.ComputeHash(Encoding.Default.GetBytes(_SignMsg.ToString()));
for (int i = 0; i < _Hash.Length; i++)
{
_Sign.Append(_Hash[i].ToString("X2"));
}
// 通过HTTP POST请求NLU服务
using (WebClient _Client = new WebClient())
{
Console.WriteLine("Sending 'POST' request to URL : " + _ApiBaseUrl);
NameValueCollection _ApiParam = null;
if (_ApiName == NluApiSample.API_NAME_SEG)
{
_ApiParam = new NameValueCollection()
{
{ "appkey", _AppKey },
{ "api", NluApiSample.API_NAME_SEG },
{ "timestamp", _Timestamp.ToString() },
{ "sign", _Sign.ToString() },
{ "rq", _InputText }
};
}
else if (_ApiName == NluApiSample.API_NAME_NLI)
{
_ApiParam = new NameValueCollection()
{
{ "appkey", _AppKey },
{ "api", NluApiSample.API_NAME_NLI },
{ "timestamp", _Timestamp.ToString() },
{ "sign", _Sign.ToString() },
{ "rq", "{\"data_type\":\"stt\", \"data\":{\"input_type\":1,\"text\":\"" + _InputText + "\"}}" }
};
}
byte[] _Response = _Client.UploadValues(_ApiBaseUrl, _ApiParam);
_Result = System.Text.Encoding.UTF8.GetString(_Response);
}
return _Result;
}
}
}
ASR 语音合成
using Baidu.Aip.Speech;
using System;
using System.Collections;
using System.Collections.Generic;
using System.Net.Http;
using UnityEngine;
using UnityEngine.Networking;
/// 人工智能语音播放
using Ai.Olami.Example;
using Baidu.Aip.Speech;
using System;
using System.Collections;
using System.Collections.Generic;
using System.Collections.Specialized;
using System.Net;
using System.Net.Http;
using System.Security.Cryptography;
using System.Text;
using UnityEngine;
using UnityEngine.Networking;
using UnityEngine.UI;
using static Json_ZH;
/// 识别结果
private string GetRecognitionResult(string _ApiName, string _InputText)
{
string _Result;
double _Timestamp = Convert.ToInt64((DateTime.Now.ToUniversalTime() - new DateTime(1970, 1, 1, 0, 0, 0)).TotalMilliseconds);
// 准备消息以生成MD5摘要
StringBuilder _SignMsg = new StringBuilder()
.Append(_Secret)
.Append("api=")
.Append(_ApiName)
.Append("appkey=")
.Append(_Key)
.Append("timestamp=")
.Append(_Timestamp)
.Append(_Secret);
// 生成MD5摘要
MD5 _Md5 = MD5.Create();
StringBuilder _Sign = new StringBuilder();
byte[] hash = _Md5.ComputeHash(Encoding.Default.GetBytes(_SignMsg.ToString()));
for (int i = 0; i < hash.Length; i++)
{
_Sign.Append(hash[i].ToString("X2"));
}
// 通过HTTP POST请求NLU服务
using (WebClient _Client = new WebClient())
{
print(("发送'POST'请求到URL" + _ApiBaseUrl));
NameValueCollection _ApiParam = null;
//如果 HTTP API 为 seg
if (_ApiName == NluApiSample.API_NAME_SEG)
{
_ApiParam = new NameValueCollection()
{
{ "appkey", _Key },
{ "api", NluApiSample.API_NAME_SEG },
{ "timestamp", _Timestamp.ToString() },
{ "sign", _Sign.ToString() },
{ "rq", _InputText }
};
}
//如果 HTTP API 为 nli
else if (_ApiName == NluApiSample.API_NAME_NLI)
{
_ApiParam = new NameValueCollection()
{
{ "appkey", _Key },
{ "api", NluApiSample.API_NAME_NLI },
{ "timestamp", _Timestamp.ToString() },
{ "sign", _Sign.ToString() },
{ "rq", "{\"data_type\":\"stt\", \"data\":{\"input_type\":1,\"text\":\"" + _InputText + "\"}}" }
};
}
//获取网页数据
byte[] _Response = _Client.UploadValues(_ApiBaseUrl, _ApiParam);
//byte 数组 转换为 文字
_Result = Encoding.UTF8.GetString(_Response);
}
print(_Result);
//返回欧拉密 Json 数据
return _Result;
}
#region 百度令牌访问弃用
private IEnumerator GetAccessToken02()
{
WWWForm wWWForm = new WWWForm();
wWWForm.AddField("grant_type", "client_credentials");
wWWForm.AddField("client_id", _API_Key);
wWWForm.AddField("client_secret", _Secret_Key);
UnityWebRequest unityWebRequest = UnityWebRequest.Post(_AuthHost, wWWForm);
yield return unityWebRequest.SendWebRequest();
if (unityWebRequest.isNetworkError)
{
print("网络错误");
}
else
{
if (unityWebRequest.responseCode == 200)
{
string re = unityWebRequest.downloadHandler.text;
print("获取：" + re);
//onGet
}
}
}
#endregion
}
人工智能语音 Json 数据支持
using System;
using System.Collections.Generic;
/// 搭载运行
基础运行
支持多轮对话
实时传输语音数据 并播放
暂时先这样吧，如果有时间的话就会更新，实在看不明白就留言，看到我会回复的。
路漫漫其修远兮，与君共勉。