资讯 文档
技术能力
语音技术
文字识别
人脸与人体
图像技术
语言与知识
视频技术

智能抠图

接口描述

检测图像中的主体内容,擦除背景后返回主体内容,可对复杂背景下多主体进行抠图,支持自动识别主体和手动框选主体两种抠图方式,适用于人、动物、食物、物品等场景的抠图需求。示意图如下:
自动识别主体:
示例图片1.png

手动框选主体:
示例图片2.png

申请试用

该接口正在邀测中,在正式使用之前,请先提交合作咨询,或者提交工单,提供公司名称、appid、应用场景,工作人员协助开通权限后方可使用。

在线调试

您可以在 示例代码中心 中调试该接口,可进行签名验证、查看在线调用的请求内容和返回结果、示例代码的自动生成。

请求说明

请求示例

HTTP 方法:POST

请求URL: https://aip.baidubce.com/rest/2.0/image-process/v1/segment

URL参数:

参数
access_token 通过API Key和Secret Key获取的access_token,参考”Access Token获取

Header如下:

参数
Content-Type application/json

Body中放置请求参数,参数详情如下:

请求参数

参数 是否必选 类型 可选值范围 说明
image 和 url 二选一 string - 图像数据,base64编码,要求base64编码后大小不超过10M,最短边至少128px,最长边最大3000px,支持JPG、JPEG、PNG、WEBP、BMP格式。
优先级:image > url,当 image 字段存在时,url 字段失效
注意:图片的base64编码是不包含图片头的,如(data:image/jpg;base64,)
url 和 image 二选一 string - 图片完整URL,URL长度不超过1024字节,URL对应的图片base64编码后大小不超过10M,最短边至少128px,最长边最大3000px,支持JPG、JPEG、PNG、WEBP、BMP格式。
优先级:image > url,当 image 字段存在时,url 字段失效
return_form string - 指定返回的图像形式:
• rgba:返回抠出主体,背景透明的四通道PNG图
• mask:返回单通道mask图(mask为原图大小的二值图像,用于标识图像中抠出的主体,白色代表主体前景,黑色代表背景)
默认为rgba
refine_mask string - 是否对边缘进行平滑处理:
• false:不对边缘平滑处理
• true:对边缘平滑处理
默认值为true
method string - 选择分割抠图的方式:
• auto:自动检测画面中的主体进行抠图
• control:手动框选主体进行抠图,需输入主体位置外框
默认为auto
position list - 所选择主体的位置信息数组,以boxes矩形坐标表示,当 method 参数选择“control”时必填:
输入矩形框左上角和右下角的坐标信息[ [[x1,y1], [x2,y2]] ],其中左上角用[x1, y1], 右下角为[x2, y2]。支持可以输入多个矩形框,同时分割多个主体,[ [[x1,y1], [x2,y2]], [[x3,y3], [x4,y4]] ], 建议矩形框完整框住主体。

请求代码示例

提示一:使用示例代码前,请记得替换其中的示例Token、图片地址或Base64信息。

提示二:部分语言依赖的类或库,请在代码注释中查看下载地址。

curl -i -k 'https://aip.baidubce.com/rest/2.0/image-process/v1/segment?access_token=【调用鉴权接口获取的token】' --data '{"image":"图片base64编码", "method": "auto", "refine_mask":"true", "return_form":"rgba"}' -H 'Content-Type:application/json; charset=UTF-8'
<?php
/**
 * 发起http post请求(REST API), 并获取REST请求的结果
 * @param string $url
 * @param string $param
 * @return - http response body if succeeds, else false.
 */
function request_post($url = '', $param = '')
{
    if (empty($url) || empty($param)) {
        return false;
    }

    $postUrl = $url;
    $curlPost = $param;
    // 初始化curl
    $curl = curl_init();
    curl_setopt($curl, CURLOPT_URL, $postUrl);
    curl_setopt($curl, CURLOPT_HEADER, 0);
    // 要求结果为字符串且输出到屏幕上
    curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
    curl_setopt($curl, CURLOPT_SSL_VERIFYPEER, false);
    // post提交方式
    curl_setopt($curl, CURLOPT_POST, 1);
    curl_setopt($curl, CURLOPT_POSTFIELDS, $curlPost);
    // 运行curl
    $data = curl_exec($curl);
    curl_close($curl);

    return $data;
}

$token = '[调用鉴权接口获取的token]';
$url = 'https://aip.baidubce.com/rest/2.0/image-process/v1/segment?access_token=' . $token;
$bodys = "{"image":"图片base64编码", "method": "auto", "refine_mask":"true", "return_form":"rgba"}"
$res = request_post($url, $bodys);

var_dump($res);
package com.baidu.ai.aip;

import com.baidu.ai.aip.utils.HttpUtil;
import com.baidu.ai.aip.utils.GsonUtils;

import java.util.*;

/**
* 智能抠图
*/
public class Inpainting {

    /**
    * 重要提示代码中所需工具类
    * FileUtil,Base64Util,HttpUtil,GsonUtils请从
    * https://ai.baidu.com/file/658A35ABAB2D404FBF903F64D47C1F72
    * https://ai.baidu.com/file/C8D81F3301E24D2892968F09AE1AD6E2
    * https://ai.baidu.com/file/544D677F5D4E4F17B4122FBD60DB82B3
    * https://ai.baidu.com/file/470B3ACCA3FE43788B5A963BF0B625F3
    * 下载
    */
    public static String inpainting() {
        // 请求url
        String url = "https://aip.baidubce.com/rest/2.0/image-process/v1/segment";
        try {
            Map<String, Object> map = new HashMap<>();
            map.put("image", "图片base64编码");
            map.put("method", "auto");
            map.put("refine_mask", "true");
            map.put("return_form", "rgba");
            String param = GsonUtils.toJson(map);

            // 注意这里仅为了简化编码每一次请求都去获取access_token,线上环境access_token有过期时间, 客户端可自行缓存,过期后重新获取。
            String accessToken = "[调用鉴权接口获取的token]";

            String result = HttpUtil.post(url, accessToken, "application/json", param);
            System.out.println(result);
            return result;
        } catch (Exception e) {
            e.printStackTrace();
        }
        return null;
    }

    public static void main(String[] args) {
        Inpainting.inpainting();
    }
}
# encoding:utf-8

import requests

'''
智能抠图
'''

request_url = "https://aip.baidubce.com/rest/2.0/image-process/v1/segment"

params = "{"image":"图片base64编码", "method": "auto", "refine_mask":"true", "return_form":"rgba"}"
access_token = '[调用鉴权接口获取的token]'
request_url = request_url + "?access_token=" + access_token
headers = {'content-type': 'application/json'}
response = requests.post(request_url, data=params, headers=headers)
if response:
    print (response.json())
#include <iostream>
#include <curl/curl.h>

// libcurl库下载链接:https://curl.haxx.se/download.html
// jsoncpp库下载链接:https://github.com/open-source-parsers/jsoncpp/
const static std::string request_url = "https://aip.baidubce.com/rest/2.0/image-process/v1/segment";
static std::string inpainting_result;
/**
 * curl发送http请求调用的回调函数,回调函数中对返回的json格式的body进行了解析,解析结果储存在全局的静态变量当中
 * @param 参数定义见libcurl文档
 * @return 返回值定义见libcurl文档
 */
static size_t callback(void *ptr, size_t size, size_t nmemb, void *stream) {
    // 获取到的body存放在ptr中,先将其转换为string格式
    inpainting_result = std::string((char *) ptr, size * nmemb);
    return size * nmemb;
}
/**
 * 智能抠图
 * @return 调用成功返回0,发生错误返回其他错误码
 */
int inpainting(std::string &json_result, const std::string &access_token) {
    std::string url = request_url + "?access_token=" + access_token;
    CURL *curl = NULL;
    CURLcode result_code;
    int is_success;
    curl = curl_easy_init();
    if (curl) {
        curl_easy_setopt(curl, CURLOPT_URL, url.data());
        curl_easy_setopt(curl, CURLOPT_POST, 1);
        curl_slist *headers = NULL;
        headers = curl_slist_append(headers, "Content-Type:application/json;charset=UTF-8");
        curl_easy_setopt(curl, CURLOPT_HTTPHEADER, headers);
        curl_easy_setopt(curl, CURLOPT_POSTFIELDS, "{"image":"图片base64编码", "method": "auto", "refine_mask":"true", "return_form":"rgba"}");
        result_code = curl_easy_perform(curl);
        if (result_code != CURLE_OK) {
            fprintf(stderr, "curl_easy_perform() failed: %s
",
                    curl_easy_strerror(result_code));
            is_success = 1;
            return is_success;
        }
        json_result = inpainting_result;
        curl_easy_cleanup(curl);
        is_success = 0;
    } else {
        fprintf(stderr, "curl_easy_init() failed.");
        is_success = 1;
    }
    return is_success;
}
using System;
using System.IO;
using System.Net;
using System.Text;
using System.Web;

namespace com.baidu.ai
{
    public class Inpainting
    {
        // 智能抠图
        public static string inpainting()
        {
            string token = "[调用鉴权接口获取的token]";
            string host = "https://aip.baidubce.com/rest/2.0/image-process/v1/segment?access_token=" + token;
            Encoding encoding = Encoding.Default;
            HttpWebRequest request = (HttpWebRequest)WebRequest.Create(host);
            request.Method = "post";
            request.KeepAlive = true;
            String str = "{"image":"图片base64编码", "method": "auto", "refine_mask":"true", "return_form":"rgba"}";
            byte[] buffer = encoding.GetBytes(str);
            request.ContentLength = buffer.Length;
            request.GetRequestStream().Write(buffer, 0, buffer.Length);
            HttpWebResponse response = (HttpWebResponse)request.GetResponse();
            StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.Default);
            string result = reader.ReadToEnd();
            Console.WriteLine("智能抠图:");
            Console.WriteLine(result);
            return result;
        }
    }
}

返回说明

返回参数

字段 是否必选 类型 说明
log_id uint64 唯一的log id,用于问题定位
image string 结果图像的base64图片编码:
• 当请求参数return_form设置为rgba时,当请求参数return_form设置为rgba时,返回保留主体的透明背景四通道PNG图的base64编码。
• 当请求参数return_form设置为mask时,返回单通道mask图的的base64编码。

返回示例

{
     "log_id": "273849795323489",
     "image": ”处理后图片的Base64编码“
}
上一篇
图像去噪
下一篇
SDK文档