前端之家收集整理的这篇文章主要介绍了
云知声口语评测服务Android SDK API文档，
前端之家小编觉得挺不错的，现在分享给大家，也给大家做个参考。
此文档仅用于个人方便查阅，由于GitHub访问速度慢而移植，不提供任何私密信息。详情请查阅 云知声官方文档，侵删。
OralEvalSDKFactory
评测静态工厂类，用于设置评测服务地址、初始化离线引擎、发起评测等。
- public final static String SDK_VERSION;
|
|
| 说明 |
获得当前SDK版本号 |
| 版本支持 |
最低2.0.0 |
- public static void initServerAndPort(String server,int port)
|
|
| 说明 |
设置服务地址。一般不用设置，使用默认值即可 |
| 版本支持 |
最低2.0.0 |
| 参数 server |
服务的域名或者ip地址 |
| 参数 port |
服务的tcp端口 |
|
|
| 说明 |
初始化离线评测引擎，该方法会解压离线引擎模型并加载模型。调用任何离线功能之前需要确保该初始化成功。如果不需要使用离线评测功能，则无需调用此初始化方法 |
| 版本支持 |
最低2.0.0 |
| 参数 context |
android.content.Context实例，比如一个Activity |
| 参数 workingDir |
离线引擎模型的解压的位置 |
| 返回值 |
初始化正确返回NOERROR；其他错误参考IOralEvalSDK.OfflineSDKError的说明 |
- public static void cleanupOfflineSDK(Context context)
|
|
| 说明 |
销毁离线引擎。销毁后不能再调用任何离线评测功能 |
| 版本支持 |
最低2.0.0 |
| 参数 context |
android.content.Context实例，比如一个Activity |
|
|
| 说明 |
发起一个评测。评测必须是单实例的，即上一次评测结束之前，不能发起新的评测 |
| 版本支持 |
最低2.0.0 |
| 参数 context |
android.content.Context实例，比如一个Activity |
| 参数 cfg |
评测参数，详见StartConfig
|
| 参数 cb |
监听接口，用于接收评测结果，实时音量，实时语音数据，和错误信息，详见ICallback
|
OralEvalSDKFactory.StartConfig
评测参数类。标识了所有评测的参数设置。
- public StartConfig(String oralText)
|
|
| 说明 |
指定评测文本，构建一个默认参数对象。默认ServiceType为A，VadEnable为false，ConnectTimeout为100，uSEOfflineWhenFailedToConnectToServer为false，AudioStream为null |
| 版本支持 |
最低2.0.0 |
| 参数 oralText |
要评测的文本。 |
| 注意 |
请不要传递空字符串，否则有可能会抛出IllegalArgumentException异常 |
- public void setUid(String uid)
- public void setOnline_ip(String online_ip)
|
|
| 说明 |
设置在线评测ip和端口号，默认不设置，在线评测就走我们内部默认的ip和端口号，如果设置了ip和端口号，在线评测就走设置的ip和端口号 |
| 版本支持 |
最低3.6.22 |
| 参数 online_ip |
ip和端口号组成的字符串 |
- public void setVadEnable(boolean vadEnable)
|
|
| 说明 |
设置vad是否启用。VAD用于检测用户是否说话，以及是否说话完成。在检测到用户没有说话或者说话已经完成时会自动结束评测 |
| 版本支持 |
最低2.0.0 |
| 参数 vadEnable |
true启用VAD，false不启用VAD，默认不启动 |
- public void setVadBeforeMs(int vadBeforeMs)
|
|
| 说明 |
设置最长前置静音时间。即如果评测开始后的vadBeforeMs毫秒内没有检测到说话，就自动结束。对应ICallback中的onStop()方法中的EndReason为NoVoice |
| 版本支持 |
最低2.0.0， 3.0.0之后的版本将停止类型从int改为枚举 |
| 参数 vadBeforeMs |
最长前置静音时间，默认2000(毫秒)，最大值3000(毫秒)，最小值1000(毫秒) |
- public void setVadAfterMs(int vadAfterMs)
|
|
| 说明 |
设置最长后置静音时间。即如果检测到说话后，在vadAfterMs毫秒内一直没有检测到说话，就自动结束。对应ICallback中的onStop()方法中的EndVoice为VoiceEnd |
| 版本支持 |
最低2.0.0， 3.0.0之后的版本将停止类型从int改为枚举 |
| 参数 vadAfterMs |
最长后置静音时间，默认2000(毫秒)。此参数最大值支持3000毫秒，大于3000毫秒内部按照3000毫秒处理，最小值1000(毫秒) |
- public void set_uSEOfflineWhenFailedToConnectToServer(boolean _uSEOfflineWhenFailedToConnectToServer)
|
|
| 说明 |
设置是否启动离在线混合评测，即遇到网络或者服务错误的时候，自动使用本地的评测引擎。离线评测引擎需要SDK支持 |
| 版本支持 |
最低2.0.0 |
| 参数 _uSEOfflineWhenFailedToConnectToServer |
true启动混合评测，false仅使用在线评测。默认为false |
- public void setOralText(String oralText)
|
|
| 说明 |
设置评测文本 |
| 版本支持 |
最低2.0.0 |
| 参数 oralText |
需要评测的音频对应的文本。文本长度最大支持16000字符 |
| 注意 |
请不要传递空字符串，否则有可能会抛出IllegalArgumentException异常 |
- public void setOralEvalMode(OralEvalEnum.OnlineUS)
|
|
| 说明 |
设置评测语言 |
| 版本支持 |
最低3.6.29 |
| 参数 enum |
需要评测的语言种类默认为英文。 |
| 注意 |
目前仅支持OralEvalEnum.OnlineUS和OralEvalEnum.OnlineCH |
|
|
| 说明 |
调整评分严厉程度，比如对于鼓励为主的应用可以适当提升评测得分 |
| 版本支持 |
最低2.4.3 |
| 参数 scoreAdjuest |
得分系数。具体值请咨询客户经理（默认值是1.0，范围（0.6~1.9）） |
- public void setServiceType(String serviceType)
|
|
| 说明 |
设置评测模式 |
| 版本支持 |
最低2.0.0 |
| 参数 serviceType |
需要评测的模式。具体参考评测模式说明文档
|
- public void setConnectTimeout(int connectTimeout)
|
|
| 说明 |
设置在线评测时连接服务器的超时时间。对应java.net.socket.connect()中超时参数 |
| 版本支持 |
最低2.0.0 |
| 参数 connectTimeout |
连接评测服务时的超时时间，单位为毫秒。默认值为1000毫秒 |
- public void setVolumeReport(boolean on)
|
|
| 说明 |
设置SDK是否上报音量，如果应用层不需要实时音量，请关闭上报音量功能，减少不必要的计算消耗 |
| 版本支持 |
最低3.5.9 |
| 参数 on |
true为打开上报，flase关闭上报。默认为true |
- public void setAudioStream(InputStream audioStream)
|
|
| 说明 |
设置评测的音频流。音频格式为16k采样，16bit有符号整数，单声道的pcm |
| 版本支持 |
最低2.0.0 |
| 参数 audioStream |
不为空，则从该流中读取音频评测， 否则从麦克风录音评测。默认从麦克风录音评测 |
- public void setMp3Audio(boolean mp3Audio)
|
|
| 说明 |
设置本地音频数据回调的音频数据格式 |
| 版本支持 |
最低2.0.0 |
| 参数 mp3Audio |
true，则以mp3格式输出， 否则以16k，16bit有符号整数，单声道pcm格式输出 |
- public void setBufferLog(boolean bufferLog)
|
|
| 说明 |
设置是否保存评测SDK内部Log，以便需要时取出。参考IOralEvalSDK.getLog() |
| 版本支持 |
最低2.6.5 |
| 参数 bufferLog |
true，内部保存Log；否则，内部不保存Log |
- public void setAsyncRecognize(boolean asyncRecognize)
|
|
| 说明 |
设置是否启用延迟评测。 |
| 版本支持 |
最低3.6.14 |
| 参数 asyncRecognize |
true启用延迟评测，false不启用延迟评测，默认不启用 |
- public void setReTry(boolean reTry)
|
|
| 说明 |
设置是否使用重试，注意：如果使用重试，在构造OralEvalSDKFactory.StartConfig实例时需要用StartConfig(String oralText,String fileFullName)进行构造，且fileFullName文件为opus格式的文件，可参考demo |
| 版本支持 |
最低v3.6.17 |
| 参数 reTry |
true使用重试，false不使用重试，默认不使用 |
IOralEvalSDK
评测实例，从OralEvalSDKFactory.start()创建。一个时刻只能有一个评测实例。
|
|
| 说明 |
获得该次评测的Log字符串。当遇到问题是，该字符串可以帮助Unisound分析错误原因。 |
| 注意事项 |
评测参数中需要指明打开Log功能。OralEvalSDKFactory.StartConfig.setBufferLog(true)。调用该函数取出Log后，内部Log将会清空，即取出的内容每次都是最新且不重叠的，如果开始评测后没有调用过该函数，那么Log会从评测开始之时，一直保存到评测结束 |
| 返回值 |
从上次取出Log后开始，到目前为止，该次评测内部的Log |
| 版本支持 |
最低2.6.5 |
IOralEvalSDK.OfflineSDKError
离线SDK错误类型
枚举值：
| 值 |
说明 |
版本支持 |
| NOERROR |
没有错误 |
最低2.0.0 |
| WRONG_MODEL |
离线模型数据错误 |
最低2.0.0 |
| WRONG_STATE |
离线调用流程错误。遇到此错误，请检查是否启动了多个评测实例 |
最低2.0.0 |
| WRONG_REFERENCE |
离线引用错误。遇到此错误联系云知声 |
最低2.0.0 |
| WRONG_DATA |
离线数据错误。遇到此错误联系云知声 |
最低2.0.0 |
| OUT_OF_MEMORY |
离线评测计算内存不足 |
最低2.0.0 |
| OUT_OF_VOC |
文本单词超出离线词汇表 |
最低2.0.0 |
| TEXT_TOO_LONG |
文本长度超出离线引擎处理能力 |
最低2.0.0 |
| TEXT_EMPTY |
空文本 |
最低2.0.0 |
| EXPIR |
离线引擎已经过期 |
最低2.0.0 |
| UNKNOWN |
未知错误。遇到此错误联系云知声 |
最低2.0.0 |
| TIMEOUT |
超时 |
最低3.0.0 |
SDKError
在线SDK错误类型和错误码(Category和对应的errno)：
| 值 |
说明 |
版本支持 |
| Network |
网络错误。错误码-7表示连接失败或超时，-8表示读取结果失败，-9标识发送数据失败 |
最低3.0.0 |
| Device |
设备错误。错误码-1001标识打开或读取录音设备失败，-1002是当输入音源是InputStream时读取该输入流失败 |
最低3.0.0 |
| Unknown_word |
所有评测的单词都不在词汇表中。错误码为-2001 |
最低3.0.0 |
| Server |
服务器错误。 此时错误码是服务端返回的，请联系云知声根据错误码进一步分析。常见内错误码包括0xFFF7文本为空内容，0xE007文本过长，0xE001暂时没有可用资源，0x2003内容格式错误 |
最低3.0.0 |
目前阶段后端还有缺陷，不能正确返回所有错误码，故同时需要httpErrorMessage供定位问题。
IOralEvalSDK.ICallback
评测回调接口。由评测发起者实现，用于接收评测结果、评测录音等信息。
此接口的方法，由SDK在工作线程中调用，因此不是在UI主线程。且为了正常执行评测过程不能在此接口的方法中执行阻塞或耗时操作
|
|
| 说明 |
评测开始回调 |
| 版本支持 |
最低2.0.0 |
| 参数 who |
评测实例。标示谁发起了此回调 |
| 参数 audioRecorderSessionId |
从麦克风录音评测时，启动的AudioRecord实例的AudioSessionId，对应AudioRecord.getAudioSessionId()方法的返回值。如果无法正常取得AudioSessionId，则为-1 |
|
|
| 说明 |
评测出错回调。返回错误后，评测会自动结束，不需要再手动调用IOralEvalSDK.stop() |
| 版本支持 |
最低2.0.0 |
| 参数 who |
评测实例。标示谁发起了此回调 |
| 参数 error |
在线评测错误的原因值 |
| 参数 offlineError |
离线评测错误的原因值 |
- public void onStop(IOralEvalSDK who,String result,boolean isOffline,String url,EndReason stopType)
|
|
| 说明 |
评测结果回调。返回结果后，评测会自动结束，不需要再手动调用IOralEvalSDK.stop() |
| 版本支持 |
最低2.0.0 |
| 参数 who |
评测实例。标示谁发起了此回调 |
| 参数 result |
在线评测错误的原因值 |
| 参数 isOffline |
结果是否为离线评测的结果 |
| 参数 url |
在线评测的录音URL地址。如果本次是离线结果，即isOffline为true，则此url无效 |
| 参数 stopType |
结束评测的原因。UserAction是调用IOralEvalSDK.stop()结束，VoiceEnd是VAD检测到完成说话结束，NoVoice是VAD检测到长时间没有人说话结束,InputStreamEnd是当使用非mic音频源评测时，音频流结束或读取失败 |
|
|
| 说明 |
评测实时音量回调 |
| 版本支持 |
最低2.0.0 |
| 参数 who |
评测实例。标示谁发起了此回调 |
| 参数 value |
实时录音的音频音量值，0-100范围 |
- public void onOpusData(IOralEvalSDK who,byte[] opusData,int len)
|
|
| 说明 |
评测实时opus流数据回调 |
| 版本支持 |
最低v3.6.17 |
| 参数 opusData |
opus流数据 |
| 参数 offset |
实时录音的opus流数据的偏移值 |
| 参数 len |
实时录音的opus流数据的总长度 |
|
|
| 说明 |
延迟评测回调，默认为不启用，需要设置 public void setAsyncRecognize(boolean asyncRecognize)为true |
| 版本支持 |
最低3.6.14 |
| 参数 who |
评测实例。标示谁发起了此回调 |
| 参数 url |
延迟评测结果所在的地址 |
- public void onStartOralEval()
FAQ
DEMO使用方法
将SDK中libs下面的jar包拷贝到工程的libs目录下；src/main下面的assets、java、jniLibs、res目录以及AndroidMainifest.xml覆盖到工程对应的目录。
工程结构图如下：
1
2
3
4
5
6
|
sourceSets {
main {
jniLibs.srcDir 'libs'
}
}
该代码加入到build.gradle
|
动态获取权限，运行过程需要给予应用所需要的录音及文件写入权限
VAD功能
该功能是自动检测是否在录音，如果没有在录音，则自动停止录音。在V3.6.36版本之前是默认开启的，在V3.6.36版本后默认关闭。
评测返回结果中Json字段说明
| 名称 |
类型 |
说明 |
@H_502_1714@version
@H_502_1714@string
@H_502_1714@结果格式版本及版本号
@H_502_1714@lines
@H_502_1714@array
@H_502_1714@每行输入文本的评测结果
@H_502_1714@EvalType
@H_502_1714@string
@H_502_1714@评测类型：general（朗读评测）、askandanswer（情景问答）、composition（作文）
@H_502_1714@sample
@H_502_1714@string
@H_502_1714@输入的标准文本
@H_502_1714@usertext
@H_502_1714@string
@H_502_1714@用户实际朗读的文本（语音识别结果）
@H_502_1714@subwords
@H_502_1714@array
@H_502_1714@包含单词的音标、开始时间、结束时间、分数、音量信息
@H_502_1714@begin
@H_502_1714@double
@H_502_1714@开始时间，单位为秒
@H_502_1714@end
@H_502_1714@double
@H_502_1714@开始时间，单位为秒
@H_502_1714@volume
@H_502_1714@double
@H_502_1714@音量
@H_502_1714@score
@H_502_1714@string
@H_502_1714@分值
@H_502_1714@subtext
@H_502_1714@string
@H_502_1714@音标或重音符号信息
@H_502_1714@integrity
@H_502_1714@double
@H_502_1714@录入语音的完整度
@H_502_1714@pronunciation
@H_502_1714@double
@H_502_1714@录入语音的标准度
@H_502_1714@fluency
@H_502_1714@double
@H_502_1714@录入语音的流利度
@H_502_1714@words
@H_502_1714@array
@H_502_1714@每个词的评测结果
@H_502_1714@text
@H_502_1714@string
@H_502_1714@单词或音素文本 (词的字符串，使用”sil”表示语音中的静音段)
@H_502_1714@type
@H_502_1714@int
@H_502_1714@类型，共有6种类型，分别是：
0 多词：仅B，C，G模式出现，当朗读内容大于文本内容时，多余的单词type值为0；eg：文本：nice to meet you，音频：nice nice to meet you，第二个nice的type值为0；
1 漏词：所有模式都有，当朗读内容小于文本内容时，未读的单词type值为1；eg：文本：nice to meet you，音频：nice meet you，结果中to的type值为1；
2 正常词：所有模式都有，识别正常的词；
3 错误词：仅B，C，G模式出现，当朗读的文本某个单词识别成文本中其他单词时，该单词type值为3。 eg：文本：nice to meet you，音频：nice you meet you，结果中第一个you的type值为3；
4 静音：所有模式；
5 重复词：预留接口，未实现；
7 空格or标点：仅E模式，空格和标点的结构type值为7；
8 生词：所有模式
@H_502_1714@sentSample
@H_502_1714@array
@H_502_1714@句式标准文本
@H_502_1714@sentscore
@H_502_1714@array
@H_502_1714@句式总分
@H_502_1714@sentPronunciation
@H_502_1714@array
@H_502_1714@句式标准度得分
@H_502_1714@sentFluency
@H_502_1714@array
@H_502_1714@句式流利度得分
@H_502_1714@sentIntegrity
@H_502_1714@array
@H_502_1714@句式完整度得分
@H_502_1714@keySample
@H_502_1714@array
@H_502_1714@关键词sample（包括关键词和每个关键词的得分
@H_502_1714@keysscore
@H_502_1714@array
@H_502_1714@关键词总分
@H_502_1714@keysPronunciation
@H_502_1714@array
@H_502_1714@关键词标准度得分
@H_502_1714@keysIntegrity
@H_502_1714@array
@H_502_1714@关键词完整度得分
@H_502_1714@keysFluency
@H_502_1714@array
@H_502_1714@关键词流利度
@H_502_1714@standardscore
@H_502_1714@string
@H_502_1714@客户定制，输出的分制，当前含有4分制和8分制
@H_502_1714@StressOfSent
@H_502_1714@string
@H_502_1714@句子重读，每个单词都输出，0：该单词没有被重读；1：该单词被重读
@H_502_1714@StressOfWord
@H_502_1714@string
@H_502_1714@单词重音，将用户发音和词典的重音位置做比较，0：该单词重音朗读错误；1：该单词重音朗读正确
@H_502_1714@tone
@H_502_1714@array
@H_502_1714@输出全部信息，数据可以用于画用户的发音曲线，目前只有内部在使用
@H_502_1714@audiocheck
@H_502_1714@array
@H_502_1714@音质检测结果。volume：音量过小的置信度；clipping：截幅的置信度；noise：噪音过大的置信度；cut:截断的置信度；too short：是否音频过短；emptyAudio：是否是空音频。
备注：置信度的值为0和10，10代表可能存在该项音质问题，0代表该项检测正常
评测模式说明
| 模式 |
模式说明 |
适用场景 |
| A |
@H_502_1714@性能最高模式，输出单词打分，不输出音素及音素打分情况
@H_502_1714@1. 适用于单词、句子评测，且不需要返回音 标信息的
2. 适用于半开放题型，如三问五答，话题简 述、看图说话等
3. 该模式强制按照文本顺序匹配，如果存在 读多遍的情况，按照第一遍进行评分，不适 用于篇章
| B |
@H_502_1714@可以输出单词打分及音素，但不输出音素打分
@H_502_1714@1. 该模式可以适用于只需要输出单词或句子 打分，需要音素音标但不需要音素打分的场景
2. 多读扣分
| C |
@H_502_1714@json 输出跟 A 模式相 同，非强制按文本顺序 匹配
@H_502_1714@适用于篇章评测
| E |
@H_502_1714@输出单词打分、音素及音素打分，同时输出空格和标点信息
@H_502_1714@1.适用于输出文本需要和输入文本一致的场 景
2.多读不扣分
| G |
@H_502_1714@输出单词打分、音素及音素打分
@H_502_1714@适用于单词、句子评测且需要返回音标即音标打分详细信息的场景
| H |
@H_502_1714@选择题模式
@H_502_1714@有多个选项，选项之间用n 或是换行隔开， 通过朗读任意文本可以自动匹配上答案
原文:大专栏 云知声口语评测服务Android SDK API文档
