图片生成 Android SDK 集成文档 | 讯飞开放平台文档中心

图片生成 Android SDK 集成文档

#1、简介

#2、SDK集成指南

#2.1 兼容性说明

#2.2 授权说明

#2.3 SDK集成包目录结构

#2.4 SDK工程配置

#2.4.1 导入SDK库

implementation files('libs/SparkChain.aar')

#2.4.2 配置权限

<!-- 移除SDK非必须权限示例 -->    
<uses-permission android:name="android.permission.READ_PHONE_STATE" tools:node="remove" />

<application android:requestLegacyExternalStorage="true"/>

#2.4.3 混淆配置

-keep class com.iflytek.sparkchain.** {*;}
-keep class com.iflytek.sparkchain.**

#2.5 初始化

#2.5.1 SDK初始化

//配置应用信息
SparkChainConfig config =  SparkChainConfig.builder()
        .appID("$appId")
        .apiKey("$apiKey")
        .apiSecret("$apiSecret");
int ret = SparkChain.getInst().init(getApplicationContext(), config);
Log.d(TAG,"sdk init:"+ret);

#2.5.2 LLM初始化

• LLMConfig参数说明：

2.7 图片生成

#2.7.1 接口调用流程图

#2.7.2 同步调用

图片理解 API 文档

#接口说明

• 用户输入一张图片和问题，从而识别出图片中的对象、场景等信息回答用户的问题
• 部分开发语言demo如下，其他开发语言请参照文档进行开发，也欢迎热心的开发者到 讯飞开放平台社区 分享你们的demo。
  图片理解 demo go语言
  图片理解 demo python语言
  图片理解 demo java语言
• 集成图像理解时，需按照以下要求:

#鉴权说明

#鉴权方法

HTTP/1.1 403 Forbidden
Date: Mon, 22 May 2023 05:44:14 GMT
Content-Length: 116
Content-Type: text/plain; charset=utf-8
{
    "message": "HMAC signature does not match, a valid date or x-date header is required for HMAC Authentication"
}

#请求参数

[
    // 用户的提问
      {"role": "user", "content": "xxx", "content_type":"image"}, // 首个必须是图片
    {"role": "user", "content": "你会做什么？"}
]

• 多轮交互的格式示例： 多轮交互需要将之前的交互历史按照user(image)->user->assistant->user->assistant规则进行拼接，保证最后一条是user的当前问题

[
    // 拼接对话历史信息:
      {"role": "user", "content": "xxx", "content_type":"image"}, // 首个必须是图片
    {"role": "user", "content": "图片里面有几个人"},              // 用户第一个问题   role是user,表示是用户的提问
    {"role": "assistant", "content": "有三个人"},        // AI的第一个回复  role是assistant，表示是AI的回复
    // 用户最新的提问
    {"role": "user", "content": "几条腿？"}
]

• 图片数据

{
    "role": "user",
    "content": "base64",
    "content_type": "image",
}

#返回结果

返回参数示例：
成功

{
    "header": {
        "code": 0,
        "message": "Success",
        "sid": "cht000704fa@dx16ade44e4d87a1c802",
        "status": 0
    },
    "payload": {
        "choices": {
            "status": 2,
            "seq": 0,
            "text": [
                {
                    "content": "这是AI的回复文本",
                  "content_type": "text",
                      "content_meta": {
                        "desc": "xxxx",
                        "url": false,
                        },
                    "index": 0,
                    "role": "assistant"
                }
            ]
        },
        "usage": {
            "text": {
                "completion_tokens": 0,
                "question_tokens": 0,
                "prompt_tokens": 0,
                "total_tokens": 0
            }
        }
    }
}

{
    "header": {
        "code": 10110,     
        "message": "xxxx", 
        "sid": "cht00120013@dx181c8172afb0001102",
        "status": 2,
    }
}

返回参数说明:

choices字段参数说明

#结果格式补充说明

• markdown（表格、列表等）
• latex（数学公式）

#常见问题

#图片理解的主要功能是什么？

#图片理解支持什么应用平台？

#图片理解的文本大小限制多少？

答：有效内容不能超过8192Token。