帮助与文档 > 产品文档 > 拍照搜题 > Android SDK 文档

有道智云拍照搜题 Android SDK 文档

有道智云拍照搜题 SDK 简介

1. 概述

  • 概念解释

拍照搜题:基于文字识别技术,结合组段和渲染技术,满足用户拍照搜题的需求

  • 说明

Hi,您好,欢迎使用有道智云拍照搜题 Android SDK。如果您想快速体验服务,建议您前往官网体验中心或者搜索小程序(有道智云体验中心)进行试用。

本文档主要针对需要集成拍照搜题服务 Android SDK的开发工程师,详细描述有道智云拍照搜题能力及集成过程。

如果您有与我们商务合作的需求,可以通过一下方式联系我们:

商务邮箱: AIcloud_Business@corp.youdao.com

如果您对文档内容有任何疑问,可以通过以下几种方式联系我们:

客服QQ:1906538062

智云拍照搜题交流QQ群:685832941

智云翻译技术交流QQ群: 652880659

智云OCR技术交流QQ群: 654064748

智云语音技术交流QQ群:861723255

联系邮箱: zyservice@corp.youdao.com

温馨提示:
本文档主要针对开发人员,接入测试前需要在后台创建Android应用,并绑定拍照搜题实例;如果您还没有,请按照新手指南操作。

平台向每个账户赠送100元的体验金,供用户集成前测试所用,具体资费规则详见拍照搜题服务报价。

2. 功能介绍

有道拍照搜题 SDK 是有道智云开放平台提供的云服务之一,是有道在线拍照搜题接口的一种实现,支持在线拍照搜题。

3. 兼容性

支持设备:运行了 Android 4.0.3及以上系统的 Android 设备

拍照搜题SDK集成指南

集成前提

开始集成SDK之前开发者需要登录有道开放平台(http://ai.youdao.com), 创建应用获取应用ID(或者通过运营人员获取应用ID),以便使用拍照搜题服务。

集成步骤

SDK包导入

请在工程文件根目录下创建一个名为 libs 的子目录(有的话则不需要创建),并将YoudaoBase.jar和Youdao.jar拷贝到 libs 目录下,并将以下代码添加到app的build.gradle中:

dependencies {
    compile files('libs/YoudaoBase.jar')
    compile files('libs/YoudaoSearchQuestion.jar')
}

AndroidManifest配置

添加权限

<uses-permission android:name="android.permission.INTERNET" />
<!-- 获取WiFi状态 -->
<uses-permission android:name="android.permission.ACCESS_WIFI_STATE" />
<!-- 获取网络信息状态,如当前的网络连接是否有效 -->
<uses-permission android:name="android.permission.ACCESS_NETWORK_STATE" />
<!-- 读取手机状态 phone group -->
<uses-permission android:name="android.permission.READ_PHONE_STATE" />
<!-- 往SDCard读写数据权限   storage group -->
<uses-permission android:name="android.permission.WRITE_EXTERNAL_STORAGE" />
<uses-permission android:name="android.permission.READ_EXTERNAL_STORAGE" />

代码混淆配置

代码混淆文件proguard-project.txt,添加如下内容

-ignorewarnings
-libraryjars libs/ YoudaoBase.jar
-libraryjars libs/YoudaoSearchQuestion.jar

-keep class com.youdao.sdk.ydtranslate.** { *;}
-keep class com.youdao.ocr.question.** { *;}

SDK初始化

使用拍照搜题SDK,请在程序的Application中调用SDK初始化代码,可以参考demo中DemoApplication

YouDaoApplication.init(this, appkey);

AndroidManifest配置

添加权限

<uses-permission android:name="android.permission.INTERNET" />
<!-- 获取WiFi状态 -->
<uses-permission android:name="android.permission.ACCESS_WIFI_STATE" />
<!-- 获取网络信息状态,如当前的网络连接是否有效 -->
<uses-permission android:name="android.permission.ACCESS_NETWORK_STATE" />
<!-- 读取手机状态 phone group -->
<uses-permission android:name="android.permission.READ_PHONE_STATE" />
<!-- 往SDCard读写数据权限   storage group -->
<uses-permission android:name="android.permission.WRITE_EXTERNAL_STORAGE" />
<uses-permission android:name="android.permission.READ_EXTERNAL_STORAGE" />

代码混淆配置

代码混淆文件proguard-project.txt,添加如下内容

-ignorewarnings
-libraryjars libs/ YoudaoBase.jar
-libraryjars libs/YoudaoSearchQuestion.jar

-keep class com.youdao.sdk.ydtranslate.** { *;}
-keep class com.youdao.ocr.question.** { *;}

SDK初始化

使用拍照搜题SDK,请在程序的Application中调用SDK初始化代码,可以参考demo中DemoApplication

YouDaoApplication.init(this, appkey);

功能集成

请参考demo中的 MainActivity 使用

构造识别输入对象

请设置 packageName 参数为对应的包名

OCRParameters tps = new OCRParameters.Builder().timeout(100000).packageName("com.youdao.com").build();

将图片转化成base64编码

String base64 = EncryptHelper.getBase64(datas);

设置回调,开始搜索

设置回调接口包含两个方法:onResult表示识别成功,相关结果存储在result参数中,onError表示失败,失败信息放在OcrErrorCode是一个枚举类中。

注意:整个识别是异步的,回调在子线程进行,若涉及到界面操作,请切回主线程。

SearchingImageQuestion.getInstance(tps).startSearching(base64, new OCRListener() {
    @Override
    public void onError(final OcrErrorCode error) {

        handler.post(new Runnable() {
            @Override
            public void run() {
                Toast.makeText(MainActivity.this, error.toString(), Toast.LENGTH_LONG).show();
                tip.setText("搜题完毕");
            }
        });
    }

    @Override
    public void onResult(final String result) {

        handler.post(new Runnable() {
            @Override
            public void run() {
                tip.setText("搜题完毕");
                ShowResultActivity.go(MainActivity.this, result);
            }
        });

    }
});

将图片转化成base64编码

String base64 = EncryptHelper.getBase64(datas);

设置回调,开始搜索

设置回调接口包含两个方法:onResult表示识别成功,相关结果存储在result参数中,onError表示失败,失败信息放在OcrErrorCode是一个枚举类中。

注意:整个识别是异步的,回调在子线程进行,若涉及到界面操作,请切回主线程。

SearchingImageQuestion.getInstance(tps).startSearching(base64, new OCRListener() {
    @Override
    public void onError(final OcrErrorCode error) {

        handler.post(new Runnable() {
            @Override
            public void run() {
                Toast.makeText(MainActivity.this, error.toString(), Toast.LENGTH_LONG).show();
                tip.setText("搜题完毕");
            }
        });
    }

    @Override
    public void onResult(final String result) {

        handler.post(new Runnable() {
            @Override
            public void run() {
                tip.setText("搜题完毕");
                ShowResultActivity.go(MainActivity.this, result);
            }
        });

    }
});

搜题结果说明

响应结果是以json形式输出,包含字段如下表所示:

字段含义
errorCode识别结果错误码,一定存在
data数据
questions相关题目
answer答案
id题目的ID
analysis解析
content内容
knowledge知识点
text图片题目OCR结果

对于在线拍照搜题,服务器查询结果返回数据如下:

{
    "data": {
        "questions": [{
            "answer": "<p>CM=DM </p><p><br/></p>",
            "id": "894fd7be65ce7b0288188bd871eebd08",
            "analysis": "<p>因为OP平分∠AOB, PC⊥OA于点C, PD⊥OB于点D,所以PD=PC,∠DPM=∠CPM.又因为PM=<br/>PM,所以△MPD≌△MPC,所以CM=DM. </p>",
            "content": "<p>如图,OP平分∠AOB, PC⊥OA于点C, PD⊥OB于点D,M为OP上任意一点,连接CM, DM,则CM和DM的大小关系是______.<br/></p><p><img src=\"http://nos.netease.com/yd-searchq/17eb37cb-1990-4453-aea8-ca151ae066fe.png\" title=\"1533365392716.png\" alt=\"blob.png\"/></p>",
            "knowledge": ""
        }, {
            "answer": "相等",
            "id": "fe9ee50505cdbd32244be8ba4cd20e2c",
            "analysis": "∵OP平分∠AOB&#xff0c;PC⊥OA&#xff0c;PD⊥OB&#xff0c; <br />∴PC&#61;PD&#xff0c;∠OPC&#61;∠OPD&#xff0c; <br />在△CPM和△DPM中&#xff0c;<img src=\"http://nos.netease.com/yd-searchq/c502f498-05e3-4828-8286-feb1a3d21abc.gif\" />&#xff0c; <br />∴△CPM≌△DPM(SAS)&#xff0c; <br />∴CM&#61;DM&#xff0e; <br />故答案为&#xff1a;相等&#xff0e; <br />根据角平分线上的点到角的两边距离相等可得PC&#61;PD&#xff0c;再求出∠OPC&#61;∠OPD&#xff0c;然后利用“边角边”证明△CPM和△DPM全等&#xff0c;根据全等三角形对应边相等可得CM&#61;DM&#xff0e; <br />本题考查了角平分线上的点到角的两边距离相等的性质&#xff0c;全等三角形的判定与性质&#xff0c;熟记性质并确定出全等三角形是解题的关键&#xff0e;",
            "content": "<img src=\"http://nos.netease.com/yd-searchq/a102f7ea-9c15-4a1d-afde-64f9d226ba57.gif\" />如图&#xff0c;OP平分∠AOB&#xff0c;PC⊥OA于C&#xff0c;PD⊥OB于D&#xff0e;M为OP上任意一点&#xff0c;连结CM、DM&#xff0c;则CM和DM的大小关系是 ______ &#xff0e;",
            "knowledge": "图形的性质>>图形认识初步>>角平分线的性质"
        }, {
            "answer": "解&#xff1a;∵OP平分∠AOB&#xff0c;PC⊥OA&#xff0c;PD⊥OB&#xff0c;<br />∴PC&#61;PD&#xff0c;∠OPC&#61;∠OPD&#xff0c;<br />在△CPM和△DPM中&#xff0c; \\( \\left\\{\\begin{array}{c}CP&#61;DP\\\\∠OPC&#61;∠OPD\\\\PM&#61;PM\\end{array}\\right. \\) &#xff0c;<br />∴△CPM≌△DPM(SAS)&#xff0c;<br />∴CM&#61;DM&#xff0e;<br />故答案为&#xff1a;相等&#xff0e;",
            "id": "d2db5fecc55c78092298f0889482dd44"
            "analysis": "本题考查了角平分线上的点到角的两边距离相等的性质&#xff0c;全等三角形的判定与性质&#xff0c;熟记性质并确定出全等三角形是解题的关键&#xff0e;",
            "content": "<img src=\"http://nos.netease.com/yd-searchq/8b8c0270-8fa5-4791-be64-fcf4652033e7.jpg\" /> <br />如图&#xff0c;OP平分∠AOB&#xff0c;PC⊥OA于C&#xff0c;PD⊥OB于D&#xff0e;M为OP上任意一点&#xff0c;连结CM、DM&#xff0c;则CM和DM的大小关系是__&#xff0e;",
            "knowledge": "角平分线的性质,全等三角形的判定与性质"
        }],
        "text": "如-3-11,0 , 平分∠AOB,PC OA于C.PDLO1S于D,M为OP上H 意一点,连接CM,DM,则CM和DM的大小关系是 ,"
    },
    "errorCode": "0"
}

图片支持

格式支持:jpg/png/bmp

尺寸限制:1MB以下

常见问题及注意事项

(1). 识别没结果?

检查下翻译接口回调的错误信息,保证申请的appKey是有效且提前绑定了。

(2). 添加翻译 SDK 之后审核没有通过?

翻译 SDK 使用了 AdSupport 框架获取设备 IDFA 信息用以统计计费,提交审核时对应用是否有广告选项请选择“是”。

错误代码列表

错误码含义
101缺少必填的参数
102不支持的语言类型
103请求文本过长
104不支持的API类型
105不支持的签名类型
106不支持的响应类型
107不支持的传输加密类型
108appKey无效
109batchLog格式不正确
110无相关服务的有效实例
111用户无效
112请求服务无效
113请求文本不能为空
201解密失败
202签名检验失败
203访问IP地址不在可访问IP列表
301词典查询失败
302小语种翻译失败
303服务的异常
401账户已经欠费停止
402offlinesdk不可用
411访问频率受限,请稍后访问
412超过最大请求字符数
12001图片尺寸过大
12002图片base64解密失败
12003引擎服务器返回错误
12004图片为空
12005不支持的识别图片类型

示例图片

http://ydschool-online.nos.netease.com/15338062758120238_12000960102.jpg
http://ydschool-online.nos.netease.com/1542701989646test.png
http://ydschool-online.nos.netease.com/1542703851482WX20181120-165038%402x.png
http://ydschool-online.nos.netease.com/15427039802392.png
http://ydschool-online.nos.netease.com/154270403620010.png
http://ydschool-online.nos.netease.com/15427040781763.png
http://ydschool-online.nos.netease.com/1543828384827WechatIMG112.png

版本更新记录

上线日期版本号更新内容
2019.02.20v1.0.0支持拍照在线搜题
文档是否有帮助解决问题?

如有其它疑问,可在此提交意见和反馈
详细描述(选填)
联系邮箱(选填)
留下您的合作信息,专业顾问将联系您提供免费的咨询
是否为渠道商:
服务类型:
详细分类:
所属地区:
所属行业:
公司名称:
业务简介:
使用场景:
使用量级:
联系人姓名:
联系人电话:
联系人邮箱:
联系人职务:
来源渠道:
verificatiton pics
验证码:
联系方式
合作咨询
联系电话:010-8255-8901
商务合作:
投诉反馈:
地       址:北京市海淀区西北旺东路10号院 中关村软件园二期西区7号 网易(北京)公司
微信公众号
微信小程序
 
 
©2019 网易公司 京ICP证080268号