博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Android Studio集成讯飞语音导出可供Unity使用的jar/aar
阅读量:5875 次
发布时间:2019-06-19

本文共 9070 字,大约阅读时间需要 30 分钟。

Android Studio集成讯飞语音导出可供Unity使用的jar/aar

因工作需要,把讯飞语音听写集成到unity,因为没有直接给unity调用的讯飞语音SDK,就想着通过android studio打包jar给unity调用

也是查了不少资料和demo,否则也无法完成需求,所以要感谢下其它的作者,但是因为过了一段时间才写的,所以参考了那个房个文章也不太记得了。如果有些看到部分相同资料的其它来源,请告诉我,我把出处加进来。

过了一遍就清晰很多,最后还加了些要注意的地方。

原码:https://github.com/yaopin002/ASXunFeiToUnity#as-unity

运行环境

Unity 2017.1.03,

Android Studio 2.3.3

Win 7

一、 创建Android Studio工程

1)第一步,点击File->New->New Project,打开"Create New Project"对话框,选择合适的Application name与Company Domain,保证Package name与Unity项目中的Bundle Idenifier一致

2)第二步,选择Phone and Tablet,并选择合适的Minimum SDK(也可以在创建后的build.gradle中设置)

3)第三步,选择“Empty Activity”

4)第四步,保持默认的Activity Name与Layout Name即可

5)最后,点击"Finish"创建工程

**以上是直接使用新创建的空activity,然后就需要下面第四个步骤--修改gradle把这个Application改成一个library

**另一个办法是直接创建一个Android Library,就不需要修改gralde了,但是空的library是不带空的activity的,所以需要手动创建activity

二、添加Unity的classes.jar引用和讯飞SDK及.so文件

1)把Unity引擎目录下中的”Editor\Data\PlaybackEngines\AndroidPlayer\Variations\mono\Release\Classes\classes.jar“文件拷贝至Android Studio工程中的libs目录

2)把讯飞语音MSC.jar也拷贝至Android Studio工程中的libs目录

3)把以上jar报进行添加依赖动作

4)把讯飞语音armeabi和armeabi-v7a的so文件拷贝到main目录下的jniLibs文件夹下(没有就新建jniLibs)

5)在gradle的android目录下添加一段代码指定库文件(这个动作运行AS时需要,如果只是做Jar/aar包就可以不用),代码如下:

sourceSets.main{    jniLibs.srcDir 'src/main/jniLibs'}复制代码

三、编写Android侧代码(修改MainActivity代码)

public SpeechRecognizer speechRecognizer;

public SpeechSynthesizer speechSynthesizer;

private String ttsSpeakerName = "yefang";

private String ttsSpeakerPitch = "50";

MainActivity

// 写在onCreate这里面的代码,在unity初始化时一样会自动执行

//注意这里的appid为

SpeechUtility.createUtility(getApplicationContext(),"appid=58880d30");

initRecognizer();

}

//初始化

private void initRecognizer(){

//1.创建SpeechRecognizer对象,第二个参数:本地听写时传InitListener

speechRecognizer = SpeechRecognizer.createRecognizer(getApplicationContext(),mInitListener);

speechSynthesizer = SpeechSynthesizer.createSynthesizer(getApplicationContext(),mInitListener);

}

//初始化SpeechRecognizer对象的监听器

public InitListener mInitListener = new InitListener() {

@Override

public void onInit(int i) {

UnityPlayer.UnitySendMessage("Manager", "Result", "init success!");

}

};

public void setTTSSpeaker(String targetName) {

ttsSpeakerName = targetName;

}

public void setTTSPitch(String targetPitch) {

ttsSpeakerPitch = targetPitch;

}

public void doTTS(String ttsStr){

UnityPlayer.UnitySendMessage("MotionManager", "IsSpeaking", "true");

//设置发音人

speechSynthesizer.setParameter(SpeechConstant.VOICE_NAME,ttsSpeakerName);

//合成语调 通过此参数,设置合成返回音频的语调。

speechSynthesizer.setParameter(SpeechConstant.PITCH,ttsSpeakerPitch);

//设置音量

speechSynthesizer.setParameter(SpeechConstant.VOLUME,"50");

int code = speechSynthesizer.startSpeaking(ttsStr, mTTSListener);

}

private SynthesizerListener mTTSListener = new SynthesizerListener() {

@Override

public void onSpeakBegin() {

}

@Override

public void onBufferProgress(int i, int i1, int i2, String s) {

}

@Override

public void onSpeakPaused() {

}

@Override

public void onSpeakResumed() {

}

@Override

public void onSpeakProgress(int i, int i1, int i2) {

}

@Override

public void onCompleted(SpeechError speechError) {

UnityPlayer.UnitySendMessage("MotionManager", "IsSpeaking", "false");

}

@Override

public void onEvent(int i, int i1, int i2, Bundle bundle) {

}

};

//开始听写

public void startSpeechListener(){

UnityPlayer.UnitySendMessage("Manager", "Result", "");

speechRecognizer.setParameter(SpeechConstant.DOMAIN, "iat");

speechRecognizer.setParameter(SpeechConstant.LANGUAGE, "zh_cn");

speechRecognizer.setParameter(SpeechConstant.ACCENT, "mandarin");

speechRecognizer.startListening(mRecognizerListener);

}

public RecognizerListener mRecognizerListener = new RecognizerListener(){

@Override

public void onBeginOfSpeech() {

// TODO Auto-generated method stub

//UnityPlayer.UnitySendMessage("Manager", "Result", "onBeginOfSpeech");

}

@Override

public void onEndOfSpeech() {

// TODO Auto-generated method stub

//UnityPlayer.UnitySendMessage("Manager", "Result", "onEndOfSpeech");

//startSpeechListener();

UnityPlayer.UnitySendMessage("Manager", "SpeechEnd","");

}

@Override

public void onError(SpeechError arg0) {

// TODO Auto-generated method stub

//UnityPlayer.UnitySendMessage("Manager", "Result", "onError");

}

@Override

public void onEvent(int arg0, int arg1, int arg2, Bundle arg3) {

// TODO Auto-generated method stub

//UnityPlayer.UnitySendMessage("Manager", "Result", "onEvent");

}

@Override

public void onResult(RecognizerResult recognizerResult, boolean isLast) {

//UnityPlayer.UnitySendMessage("Manager", "Result", "listener");

printResult(recognizerResult);

//if(isLast)

//startSpeechListener();

}

@Override

public void onVolumeChanged(int arg0, byte[] arg1) {

//UnityPlayer.UnitySendMessage("Manager", "Result", "onVolumeChanged");

// TODO Auto-generated method stub

}

};

//解析

private void printResult(RecognizerResult results) {

String json = results.getResultString();

StringBuffer ret = new StringBuffer();

try {

JSONTokener tokener = new JSONTokener(json);

JSONObject joResult = new JSONObject(tokener);

JSONArray words = joResult.getJSONArray("ws");

for (int i = 0; i < words.length(); i++) {

// 转写结果词,默认使用第一个结果

JSONArray items = words.getJSONObject(i).getJSONArray("cw");

JSONObject obj = items.getJSONObject(0);

ret.append(obj.getString("w"));

}

} catch (Exception e) {

e.printStackTrace();

}

//将解析结果“"result:" + ret.toString()”发送至“Manager”这个GameObject,中的“Result”函数

UnityPlayer.UnitySendMessage("Manager", "Result", ret.toString());

}

public void ShowToast(final String mStr2Show){

UnityPlayer.UnitySendMessage("Manager", "Result", "toast");

runOnUiThread(new Runnable() {

@Override

public void run() {

Toast.makeText(getApplicationContext(),mStr2Show,Toast.LENGTH_LONG).show();

}

});

}

四、修改build.gradle,设置工程导出为aar

1)apply plugin: 'com.android.application' 修改为 apply plugin: 'com.android.library'

2)删除 applicationId "com.zcode.unityandroidplugindemo"

3)修改后的build.gradle为

apply plugin: 'com.android.library'

android {

compileSdkVersion 24

buildToolsVersion "24.0.1"

defaultConfig {

minSdkVersion 18

targetSdkVersion 24

versionCode 1

versionName "1.0"

testInstrumentationRunner "android.support.test.runner.AndroidJUnitRunner"

}

buildTypes {

release {

minifyEnabled false

proguardFiles getDefaultProguardFile('proguard-android.txt'), 'proguard-rules.pro'

}

}

}

dependencies {

compile fileTree(include: ['*.jar'], dir: 'libs')

androidTestCompile('com.android.support.test.espresso:espresso-core:2.2.2', {

exclude group: 'com.android.support', module: 'support-annotations'

})

compile 'com.android.support:appcompat-v7:24.1.1'

testCompile 'junit:junit:4.12'

compile files('libs/classes.jar')

}

五、修改AndroidManifest.xml

1)修改样式

我们需要在 AndroidManifest 中的 application 结点修改应用的主样式为系统样式,因为导出的 AAR 文件将不带自定义的样式,在我们的 Unity 项目中生成最终 apk 的时候会出现样式找不到的错误。

android:theme="@android:style/Theme.NoTitleBar"

同时需要删除res\Values目录下的styles.xml文件

备注:如果是直接创建的Android Library就不需要这一步。

2)在主 activity 结点下添加信息,否则在 Unity 导出 APK 时会报找不到manifest 文件的错误信息

备注:如果是直接创建的Android Library就需要添加activity节点,包括里面的intent-filter、action、category(但是上面那行meta-data可以不要)

六、导出供Unity使用的*.aar/jar文件

1)点击右上角的gradle projects找到对应module的Task里的other下的makeJar,双击运行,等一会儿后就完成

备注:要在gradle根目录下添加如下两个方法才会在gradle projects出现makeJar(内容需依据需要进行修改):

task makeJar(type: Copy) {delete 'build/libs/speechrecognizer.jar'from('build/intermediates/bundles/release/')into('build/libs/')include('classes.jar')rename ('classes.jar', 'speechrecognizer.jar')}makeJar.dependsOn(build)复制代码

2)也可以通过Terminal执行命令:gradlew makeJar,会使所有Module都执行,如下图:

2 如下目录找到aar(aar文件里最外层就有一个classes.jar)

3 如下目录直接找到jar包

4 3)如果是要调用aar文件,就需使用压缩软件打开aar文件删除libs目录下unity的classes.jar文件(因为会和unity自带的classes.jar冲突),并且要删除其它jar文件和jni目录下的so文件(因为要拷贝到unity指定的目录下,下面步骤会介绍)

如果使用classes.jar就直接拷贝到Unity(拷贝前建议改个名)

Unity导入插件,并调用

一、创建Unity工程

二、导入插件到Unity工程中

1)新建目录:Plugins-Android-bin/libs

2)拷贝aar/jar文件、AndroidManifest.xml文件、so文件至如下目录注意:安卓5.0以上系统需要armeabi-v7a,不然会出现21002的错误

5 三、编写测试代码

1)新建一个cs脚本文件

2)在脚本中编写调用Android侧代码

using UnityEngine;using System.Collections;public class XunFeiTest : MonoBehaviour{ private string showResult = ""; //UnityGUI控制是利用一类被称为OnGUI()的函数,只要在控制脚本激活的状态下 //OnGUI()函数可以在每帧调用,就像Update( )函数一样。 void OnGUI () { //新建一个button,指定文本和高度 if (GUILayout.Button ("startRecognizer", GUILayout.Height (100))) { //这两行代码一般不用改 AndroidJavaClass jc = new AndroidJavaClass ("com.unity3d.player.UnityPlayer"); AndroidJavaObject jo = jc.GetStatic("currentActivity");

//调用方法

jo.Call ("startSpeechListener");

}

//创建一个TextArea,参数一:显示的内容,参数二:指定宽度

GUILayout.TextArea (showResult, GUILayout.Width (200));

}

//这是AS中指定的方法名,AS一旦有发送消息,这里就会传进来结果

public void Result (string recognizerResult)

{

showResult += recognizerResult; //把结果连接起来

}

}

四、设置并运行APK

1)设置Bundle Identifier(保持与插件的包名+类名一致)

2)设置合适的Minimum API Level(保持与插件)

五、测试

结尾

1.确定所有的aar库中的android:minSdkVerion与android:targetSdkVersion一致

2.android studio包名要和unity包名一致

3.unity的OnGUI()启动方法要大写

4.theme要改为android系统样式android:theme="@android:style/Theme.NoTitleBar",或者不要theme也可以

5.删除res下的style.xml

6.修改build.gradle:一改一删

7.务必真机测试,虚拟机会报错

8.res下activity_main.xml里的这种代码"app:layout_constraintBottom_toBottomOf="parent""要删除,不然会报错

9.AS不需要添加动态权限申请,否则会报activity找不到的错

以上如有错误请高人指正

转载于:https://juejin.im/post/5a2e49466fb9a0452405c822

你可能感兴趣的文章
java面向对象高级分层实例_实体类
查看>>
android aapt 用法 -- ApkReader
查看>>
[翻译]用 Puppet 搭建易管理的服务器基础架构(3)
查看>>
Android -- AudioPlayer
查看>>
Python大数据依赖包安装
查看>>
Android View.onMeasure方法的理解
查看>>
Node.js 爬虫初探
查看>>
ABP理论学习之仓储
查看>>
centos7下使用yum安装mysql
查看>>
How can I set ccshared=-fPIC while executing ./configure?
查看>>
2.移植uboot-添加2440单板,并实现NOR、NAND启动
查看>>
hadoop-2.6.5安装
查看>>
vmware虚拟机里的LINUX不能上网的原因一:虚拟网卡设置
查看>>
监控摄像机的区别和分类
查看>>
Java学习——对象和类
查看>>
ElasticSearch 组合过滤器
查看>>
HttpClient连接池的连接保持、超时和失效机制
查看>>
1-4 多文档界面处理(2)
查看>>
《Essential Linux Device Drivers》中文版第1章
查看>>
让远程传输大文件变得更快
查看>>