有道智云实时语音翻译SDK 简介
概述
(1) 概念解释
实时语音翻译:可实现对连续音频流的实时识别,实时识别和翻译a语音输入的内容,转换成文本信息并返回对应文字流。
(2) 说明
Hi,您好,欢迎使用有道智云实时语音翻译iOS SDK。如果您想快速体验服务,建议您前往 实时语音翻译体验中心 或者在体验中心右下侧找到小程序二维码,扫描进行体验。
本文档主要针对需要集成实时语音翻译服务iOS SDK的开发工程师,详细描述有道智云实时语音翻译能力及集成过程。
如果您有与我们商务合作的需求,可以通过以下方式联系我们:
商务邮箱: AIcloud_Business@corp.youdao.com
如果您对文档内容有任何疑问,可以通过以下几种方式联系我们:
客服QQ:1906538062
智云语音技术交流QQ群:861723255
联系邮箱: zhiyun@corp.youdao.com
温馨提示: 本文档主要针对开发人员,接入测试前需要在后台创建iOS应用,并绑定实时语音翻译实例;如果您还没有,请按照新手指南 操作。 平台向每个账户赠送50元的体验金,供用户集成前测试所用,具体资费规则详见 实时语音翻译服务报价 。
###功能介绍
有道智云实时语音翻译 SDK 是有道智云开放平台提供的云服务之一,是有道在线实时语音翻译接口的一种实现,支持在线实时语音翻译。
###兼容性
支持设备:运行了iOS 8.0及以上系统的 iOS 设备
实时语音翻译 IOS SDK集成指南
集成前提
开始集成SDK之前开发者需要登录有道智云平台 ,创建应用获取应用ID(或者通过运营人员获取应用ID),以便使用实时语音翻译服务。
集成步骤
SDK包导入
实时语音翻译 SDK 由如下几个 SDK 组成,YDStreamSpeechTrans.h、base.h 、libbase.a、libStreamSpeechTrans.a
(1). 添加头文件和库文件:将实时语音翻译 SDK 添加到工程中,包括 YDStreamSpeechTrans.h 和 base.h 头文件、libbase.a和libStreamSpeechTrans.a文件。
(2). 设置工程Other Linker Flags为-ObjC。
(3). 在工程build Phases – Link Binary With Libraries中添加libbase.a, AdSupport.framework, CoreTelephony.framework, SystemConfiguration, libz.tbd和libsqlite3.tbd。
SDK初始化
说明:所有的查询都需要初始化appkey,只执行初始化一次即可。 注:appKey即应用ID。
//初始化appkey
YDTranslateInstance *yd = [YDTranslateInstance sharedInstance];
yd.appKey = @"your appkey";
功能集成
说明:支持实时实时语音翻译,目前支持多达80余种语言的相互翻译,请参考 demo 中 StreamSpeechTransVController 的使用,其语言的代码可参考本文档支持语言列表中的内容,其已经在base.h中的YDOnlineLanguageTool类中被封装好,可以选择自定义或直接使用;
1. 参数说明 格式支持:只支持wav格式。
采样率:16k。
编码:16bit位深的单声道
2. 构造识别器
YDSpeechTranslate *translate = [YDSpeechTranslate sharedTranslate];
translate.delegate = self;
YDSpeechTranslateParam *param = [YDSpeechTranslateParam param];
param.from = @"zh-CHS";//源语言类型,目前支持多达80余种
param.to = @"en";//目标语言类型,目前支持多达80余种。  注:中英混合和粤语不能作为to
param.rate = @"16000";//采样率
param.format = @"wav";//语音文件格式
param.vadBOS = 2000;//前端点静音检测时长,ms
param.vadEOS = 2000;//后端点静音检测时长,ms
translate.delegate = param;
3. 执行识别过程
执行[self.translate startListening];开始实时语音翻译,结果将在代理方法中回调给开发者;
#pragma mark - YDSpeechTranslateDelegate
- (void)onBeginOfSpeech {
  [self startSpeakingAnimation];
  NSLog(@"------speech start-----");
}
- (void)onEndOfSpeech {
  [self endSpekingAnimation];
  NSLog(@"------speech end-----");
}
- (void)onResults:(NSDictionary *)result {
    NSString *context = result[@"context"];
    NSString *tranContent = result[@"tranContent"];
    BOOL isPartial = [result[@"partial"] boolValue];
    NSString *showContext = [NSString stringWithFormat:@"%@%@", self.displayingText, context];
    NSString *showTranContent = [NSString stringWithFormat:@"\n\n%@%@", self.displayingTranText, tranContent];
    NSMutableAttributedString *contextAtt = [self getShowText:showContext textColor:[UIColor grayColor] font:[UIFont systemFontOfSize:13]];
    NSMutableAttributedString *tranContentAtt = [self getShowText:showTranContent textColor:[UIColor blackColor] font:[UIFont boldSystemFontOfSize:15]];
    [contextAtt appendAttributedString:tranContentAtt];
    self.recognizedTV.attributedText = contextAtt;
    if (!isPartial) {
        [self.displayingText appendString:context];
        [self.displayingTranText appendString:tranContent];
    }
}
- (void)onCompleted:(NSError *)speechError {
  [self endSpekingAnimation];
  NSLog(@"------speech completed-----");
}
- (void)onConstantlyQuietIsBOS:(BOOL)isBOS {
  NSLog(@"检测到%@静音", isBOS ? @"前端点" : @"后端点");
}
4. 识别结果说明
| 参数 | 含义 | 说明 | 
|---|---|---|
| bg | 分句开始时间 | 单位毫秒/ms | 
| ed | 分句结束时间 | 单位毫秒/ms | 
| context | 识别结果 | |
| tranContent | 翻译结果 | |
| partial | 是否是中间结果 | true:中间结果;false:完整句子 | 
| segId | 分句 id | 从 0 开始递增 | 
支持语言
| 代码 | 语言 | 
|---|---|
| zh-CHS | 简体中文 | 
| en | 通用英文 | 
| enzh | 中英混合 | 
| ar-IL | 阿拉伯语(以色列) | 
| ar-JO | 阿拉伯语(约旦) | 
| ar-AE | 阿拉伯语(阿拉伯联合酋长国) | 
| ar-BH | 阿拉伯语(巴林) | 
| ar-DZ | 阿拉伯语(阿尔及利亚) | 
| ar-SA | 阿拉伯语(沙特阿拉伯) | 
| ar-IQ | 阿拉伯语(伊拉克) | 
| ar-KW | 阿拉伯语(科威特) | 
| ar-MA | 阿拉伯语(摩洛哥) | 
| ar-TN | 阿拉伯语(突尼斯) | 
| ar-OM | 阿拉伯语(阿曼) | 
| ar-PS | 阿拉伯语(巴勒斯坦国) | 
| ar-QA | 阿拉伯语(卡塔尔) | 
| ar-LB | 阿拉伯语(黎巴嫩) | 
| ar-EG | 阿拉伯语(埃及) | 
| pl | 波兰语(波兰) | 
| da | 丹麦语(丹麦) | 
| de | 德语(德国) | 
| ru | 俄语 | 
| fr | 法语(法国) | 
| fr-CA | 法语(加拿大) | 
| fi | 芬兰语(芬兰) | 
| ko | 韩语(韩国) | 
| nl | 荷兰语(荷兰) | 
| cs | 捷克语(捷克共和国) | 
| hr | 克罗地亚语(克罗地亚) | 
| lv | 拉脱维亚语(拉脱维亚) | 
| ro | 罗马尼亚语(罗马尼亚) | 
| ms | 马来语(马来西亚) | 
| pt-BRA | 葡萄牙语(巴西) | 
| pt | 葡萄牙语(葡萄牙) | 
| ja | 日语(日本) | 
| sv | 瑞典语(瑞典) | 
| te | 泰卢固语(印度) | 
| ta | 泰米尔语(印度) | 
| ta-SG | 泰米尔语(新加坡) | 
| ta-LK | 泰米尔语(斯里兰卡) | 
| ta-MY | 泰米尔语(马来西亚) | 
| th | 泰语(泰国) | 
| tr | 土耳其语(土耳其) | 
| es | 西班牙语(西班牙) | 
| es-AR | 西班牙语(阿根廷) | 
| es-BO | 西班牙语(玻利维亚) | 
| es-CL | 西班牙语(智利) | 
| es-COL | 西班牙语(哥伦比亚) | 
| es-CR | 西班牙语(哥斯达黎加) | 
| es-EC | 西班牙语(厄瓜多尔) | 
| es-SV | 西班牙语(萨尔瓦多) | 
| es-US | 西班牙语(美国) | 
| es-GT | 西班牙语(危地马拉) | 
| es-HN | 西班牙语(洪都拉斯) | 
| es-MEX | 西班牙语(墨西哥) | 
| es-NI | 西班牙语(尼加拉瓜) | 
| es-PA | 西班牙语(巴拿马) | 
| es-PY | 西班牙语(巴拉圭) | 
| es-PE | 西班牙语(秘鲁) | 
| es-PR | 西班牙语(波多黎各) | 
| es-DO | 西班牙语(多米尼加共和国) | 
| es-UY | 西班牙语(乌拉圭) | 
| es-VE | 西班牙语(委内瑞拉) | 
| it | 意大利语(意大利) | 
| hi | 印地语(印度) | 
| en-AUS | 英语(澳大利亚) | 
| en-CA | 英语(加拿大) | 
| en-GH | 英语(加纳) | 
| en-GBR | 英语(英国) | 
| en-IND | 英语(印度) | 
| en-IE | 英语(爱尔兰) | 
| en-KE | 英语(肯尼亚) | 
| en-NZ | 英语(新西兰) | 
| en-NG | 英语(尼日利亚) | 
| en-PH | 英语(菲律宾) | 
| en-SG | 英语(新加坡) | 
| en-ZAF | 英语(南非) | 
| en-TZ | 英语(坦桑尼亚) | 
| en-US | 英语(美国) | 
| vi | 越南语(越南) | 
| zh-TWN | 台湾普通话(中国台湾) | 
| lo | 老挝语(老挝) | 
| bn | 孟加拉语(孟加拉) | 
| bn-IN | 孟加拉语(印度) | 
| tl | 菲律宾语 | 
错误代码列表
| 错误码 | 含义 | 
|---|---|
| 101 | 缺少必填的参数 | 
| 102 | 不支持的语言类型 | 
| 103 | 翻译文本过长 | 
| 104 | 不支持的API类型 | 
| 105 | 不支持的签名类型 | 
| 106 | 不支持的响应类型 | 
| 107 | 不支持的传输加密类型 | 
| 108 | 应用ID无效,注册账号,登录后台创建应用和实例并完成绑定,可获得应用ID和应用密钥等信息 | 
| 109 | batchLog格式不正确 | 
| 110 | 无相关服务的有效实例 | 
| 111 | 开发者账号无效 | 
| 113 | q不能为空 | 
| 114 | 不支持的图片传输方式 | 
| 201 | 解密失败,可能为DES,BASE64,URLDecode的错误 | 
| 202 | 签名检验失败 | 
| 203 | 访问IP地址不在可访问IP列表 | 
| 205 | 请求的接口与应用的平台类型不一致,如有疑问请参考入门指南 | 
| 206 | 因为时间戳无效导致签名校验失败 | 
| 207 | 重放请求 | 
| 301 | 辞典查询失败 | 
| 302 | 翻译查询失败 | 
| 303 | 服务端的其它异常 | 
| 304 | 会话闲置太久超时 | 
| 401 | 账户已经欠费停 | 
| 402 | offlinesdk不可用 | 
| 411 | 访问频率受限,请稍后访问 | 
| 412 | 长请求过于频繁,请稍后访问 | 
| 1001 | 无效的OCR类型 | 
| 1002 | 不支持的OCR image类型 | 
| 1003 | 不支持的OCR Language类型 | 
| 1004 | 识别图片过大 | 
| 1201 | 图片base64解密失败 | 
| 1301 | OCR段落识别失败 | 
| 1411 | 访问频率受限 | 
| 1412 | 超过最大识别字节数 | 
| 2003 | 不支持的语音声道 | 
| 2004 | 不支持的语音上传类型 | 
| 2005 | 不支持的语言类型 | 
| 2006 | 不支持的识别类型 | 
| 2201 | 识别音频文件过大 | 
| 2301 | 识别音频时长过长 | 
| 2411 | 不支持的音频文件类型 | 
| 2412 | 不支持的发音类型 | 
| 3001 | 不支持的语音格式 | 
| 3002 | 不支持的语音采样率 | 
| 3003 | 不支持的语音声道 | 
| 3004 | 不支持的语音上传类型 | 
| 3005 | 不支持的语言类型 | 
| 3006 | 不支持的识别类型 | 
| 3007 | 识别音频文件过大 | 
| 3008 | 识别音频时长过长 | 
| 3009 | 不支持的音频文件类型 | 
| 3010 | 不支持的发音类型 | 
| 3201 | 解密失败 | 
| 3301 | 语音识别失败 | 
| 3302 | 语音翻译失败 | 
| 3303 | 服务的异常 | 
| 3411 | 访问频率受限,请稍后访问 | 
| 3412 | 超过最大请求字符数 | 
| 4001 | 不支持的语音识别格式 | 
| 4002 | 不支持的语音识别采样率 | 
| 4003 | 不支持的语音识别声道 | 
| 4004 | 不支持的语音上传类型 | 
| 4005 | 不支持的语言类型 | 
| 4006 | 识别音频文件过大 | 
| 4007 | 识别音频时长过长 | 
| 4201 | 解密失败 | 
| 4301 | 语音识别失败 | 
| 4303 | 服务的异常 | 
| 4411 | 访问频率受限,请稍后访问 | 
| 4412 | 超过最大请求时长 | 
| 5001 | 无效的OCR类型 | 
| 5002 | 不支持的OCR image类型 | 
| 5003 | 不支持的语言类型 | 
| 5004 | 识别图片过大 | 
| 5005 | 不支持的图片类型 | 
| 5006 | 文件为空 | 
| 5201 | 解密错误,图片base64解密失败 | 
| 5301 | OCR段落识别失败 | 
| 5411 | 访问频率受限 | 
| 5412 | 超过最大识别流量 | 
| 9001 | 不支持的语音格式 | 
| 9002 | 不支持的语音采样率 | 
| 9003 | 不支持的语音声道 | 
| 9004 | 不支持的语音上传类型 | 
| 9005 | 不支持的语音识别 Language类型 | 
| 9301 | ASR识别失败 | 
| 9303 | 服务器内部错误 | 
| 9411 | 访问频率受限(超过最大调用次数) | 
| 9412 | 超过最大处理语音长度 | 
| 10001 | 无效的OCR类型 | 
| 10002 | 不支持的OCR image类型 | 
| 10004 | 识别图片过大 | 
| 10201 | 图片base64解密失败 | 
| 10301 | OCR段落识别失败 | 
| 10411 | 访问频率受限 | 
| 10412 | 超过最大识别流量 | 
| 11001 | 不支持的语音识别格式 | 
| 11002 | 不支持的语音识别采样率 | 
| 11003 | 不支持的语音识别声道 | 
| 11004 | 不支持的语音上传类型 | 
| 11005 | 不支持的语言类型 | 
| 11006 | 识别音频文件过大 | 
| 11007 | 识别音频时长过长,最大支持30s | 
| 11201 | 解密失败 | 
| 11301 | 语音识别失败 | 
| 11303 | 服务的异常 | 
| 11411 | 访问频率受限,请稍后访问 | 
| 11412 | 超过最大请求时长 | 
| 12001 | 图片尺寸过大 | 
| 12002 | 图片base64解密失败 | 
| 12003 | 引擎服务器返回错误 | 
| 12004 | 图片为空 | 
| 12005 | 不支持的识别图片类型 | 
| 12006 | 图片无匹配结果 | 
| 13001 | 不支持的角度类型 | 
| 13002 | 不支持的文件类型 | 
| 13003 | 表格识别图片过大 | 
| 13004 | 文件为空 | 
| 13301 | 表格识别失败 | 
| 15001 | 需要图片 | 
| 15002 | 图片过大(1M) | 
| 15003 | 服务调用失败 | 
| 17001 | 需要图片 | 
| 17002 | 图片过大(1M) | 
| 17003 | 识别类型未找到 | 
| 17004 | 不支持的识别类型 | 
| 17005 | 服务调用失败 | 
| -1000 | 未知错误 | 
| -2000 | 查询输入为空 | 
常见问题及注意事项
- 运行程序崩溃? 检查下是否对应的 - SDK静态库包是否放到当前工程目录下。
- 翻译没结果? 检查下翻译接口回调的错误信息,保证申请的应用ID是有效且提前绑定了。 
- 如何获得应用ID 注册账号,登录后台创建应用和实例并完成绑定, 可获得应用ID和应用密钥等信息。 
- 添加翻译 SDK 之后审核没有通过? 翻译 SDK 使用了 AdSupport 框架获取设备 IDFA 信息用以统计计费,提交审核时对应用是否有广告选项请选择“是”。 
版本更新记录
| 上线日期 | 版本号 | 更新内容 | 
|---|---|---|
| 2019.06.20 | v1.0.0 | 增加流式语音翻译 | 
| 2019.09.19 | v1.1.0 | 扩充小语种 | 
 
			