资讯 社区 文档
技术能力
语音技术
文字识别
人脸与人体
图像技术
语言与知识
视频技术

EdgeBoard人体检测软硬一体方案说明

1 简介
 1.1 人体检测功能说明
 1.2 开发管理平台功能说明
 1.3 硬件接口说明
2 使用步骤
 2.1 连接设备
 2.2 登录管理平台
 2.3 查看预置模型
 2.4 添加摄像头
 2.5 添加任务
3 系统设置
4 HTTP结果回调
5 HTTP模型推理服务接口

简介

EdgeBoard软硬一体方案,是以EdgeBoard边缘AI计算盒为底座,WEB开发管理平台为控制中心,专项适配百度自研算法,并深度兼容AI开发平台EasyDL和开源深度学习平台PaddlePaddle,支持模型在线效果验证,外接显示器实时显示渲染结果,同时,支持HTTP回调和HTTP模型推理服务,可接入USB摄像头和RTSP网络摄像头,硬件接口丰富,支持二次开发。

人体检测软硬一体方案,预置人体检测算法,可离线本地化部署,可用于人体定位、人员计数、人流统计。

人体检测功能说明

人体检测功能体验: https://ai.baidu.com/tech/body/attr

注:人体检测软硬一体方案不包含人体属性分析。

人体检测模型可以检测图像中的所有人体,返回每个人体的矩形框位置,支持人体重叠、遮挡、截断、背面、侧面、动作变化等复杂场景。

主要适用于监控场景的中低空斜拍视角,支持人体轻度截断、轻度遮挡、背面、侧面、动作变化等复杂场景。实际应用中可根据接口输出的人体框概率分数进行过滤,排除掉分数低的误识别“无效人体”。

摄像头硬件选型无特殊要求,分辨率建议720p以上,更低分辨率的图片也能识别,只是效果可能有差异。夜间红外监控图片的识别效果可能欠佳

开发管理平台功能说明

Edgeboard内置可视化开发管理平台,支持web页面进行总览、摄像头管理、模型管理、任务管理、系统设置等操作。

功能 描述
总览 支持实时查看设备内存、CPU和存储空间的资源剩余情况,以及当前添加的模型、摄像头和任务情况。
模型管理 支持PaddlePaddle模型、Easydl的图像分类和物体检测模型以及其他Edgeboard模型的添加和管理,支持在线效果验证
摄像头管理 支持USB摄像头、RTSP网络摄像头的添加和管理,在线校验视频流地址,支持画面预览
任务管理 支持添加数据采集任务、Paddle模型视频分析、EasyDL模型视频分析和EdgeBoard SDK视频分析等任务,支持画面预览,支持任务的开启和关闭。
系统设置 支持设备信息的显示、系统时间的修改、软件版本升级、以太网设置和Wi-Fi网络设置、恢复出厂设置、重启等功能。
HTTP回调 支持将视频流任务或者采集任务结果通过HTTP协议推送到指定地址,方便客户进行二次开发。
HTTP模型推理服务 支持调用HTTP服务接口传入图片,EdgeBoard再将分析结果回传至HTTP客户端。

硬件接口说明

更多硬件介绍请参考EdgeBoard基础硬件使用说明

使用步骤

以下仅以人体检测软硬一体方案的常规操作进行演示,更多使用方式请参考EdgeBoard开发管理平台使用说明

人体检测软硬一体方案,预置了人体检测模型,可以直接添加摄像头和任务,开启AI识别,大体操作流程如下:【连接软硬一体设备】----> 【登录开发管理平台】----> 【查看预置模型】----> 【添加摄像头】----> 【添加任务】----> 【开始预测】

连接设备

将设备通过网线连接电脑(直连电脑或者通过路由器),设备的网络参数为:ip=192.168.1.254,子网掩码=255.255.255.0,网关=192.168.1.1。保证设备和电脑在同一网段,如果是直连电脑可以将电脑设置成固定IP。

电脑端网络配置可参考网络配置

登录管理平台

在浏览器中输入开发管理平台首页地址,即可显示登录页面,登录完成后进入管理页面。

开发管理平台首页地址:http://ip:9876/ 出厂默认:http://192.168.1.254:9876/

开发管理平台账号:admin,初始密码:admin

进入系统

查看预置模型

查看模型管理页面,人体检测软硬一体设备中,包含人体检测模型。用于检测图像中的所有人体并返回每个人体的矩形框位置。

注意:模型管理页面的【效果验证】仅提供单模型的推理效果

添加摄像头

EdgeBoard开发管理平台支持USB摄像头和RTSP摄像头两种类型,用户可根据使用场景进行选择。

添加USB摄像头

先将USB摄像头插到EdgeBoard上再在页面中添加对应的摄像头,此时,点击【选择摄像头】右边框的箭头,下拉框会自动弹出当前设备上已插入的USB摄像头节点,并采集一张当前图片,点击待添加的摄像头,确定。

添加网络摄像头

保证EdgeBoard和网络摄像头的网络互通的状态下,添加网络摄像头,摄像头类型选择网络摄像头,输入视频流地址后,点击右侧的【校验】按钮,如果出现对勾,证明视频流地址(RTSP流地址)填写正确,并能够正常采集到图片。校验成功后点击确定,在管理页面就可以看到已添加的摄像头。

SN码为您的摄像头设备唯一ID(选填)。

添加任务

EdgeBoard开发管理平台支持添加不同功能的任务,例如可以添加数据采集任务,视频分析任务等。以视频任务为例

选择任务类型

选择任务类型选择EdgeBoard算法【人体跟踪】

任务配置

配置与paddle模型类似,带“*”为必填项,确定需要部署的模型和对应的摄像头,以及模型推理的帧率,其余按需填写即可。

画面框定

画面框定是指在检测区域中框定一个闭合区域,后续只识别框定区域内的物体。在人体检测软硬一体设备中,画面框定功能可选。不需要画面框定时,直接确认即可。

注:画面框定最多可以绘制10个分析区域

启动任务

画面预览

外接显示器

EdgeBoard提供视频输出接口miniDP,可以外接显示器(如果是HDMI接口的显示器,需要使用主动式miniDP转HDMI转换线,接口输出参考链接),在上电状态下插入显示器时,首次点击【外接显示器】的开关按钮后,需要重启设备。

一般情况下,显示器显示的视频帧率为创建任务时设置的帧率,当设置的帧率大于设备实际能够处理的帧率时,设备会以最大处理速率显示,渲染画面和系统中【画面预览】相同。

更多任务管理设置请参考EdgeBoard开发管理平台使用说明

系统设置

系统设置请参考EdgeBoard开发管理平台使用说明-系统设置

HTTP结果回调

说明

当用户需要获取EdgeBoard的分析结果时,EdgeBoard开发管理平台支持将视频流任务结果通过HTTP协议推送到指定地址,方便客户进行二次开发。

HTTP回调方式:EdgeBoard ----- post -----> 用户服务器

​ EdgeBoard <------ response---- 用户服务器

HTTP回调接口:http://ip:port/xxxxxxx 。该接口由用户定义,不做固定格式要求。

回调功能设置

添加任务时,可设置回调功能

回调状态:勾选【启用】会开启回调功能;勾选【禁用】会关掉回调功能;

回调地址:用户实际回调服务地址(图中地址仅作展示),开启回调后,设备会将结果数据发送至该地址;

回调条件:回调结果支持基于模型标签(label)进行条件筛选,增加回调条件后,服务器就会得到筛选后的数据;

回调图片:回调图片仅指回调参数中“background”的返回值,【原图】指返回的background为不带渲染的base64图片,【原图+渲染】指返回的background为不带渲染的base64图片,【无图片】则回调结果中不返回background参数。由于回调中返回图片会占用大量的资源和带宽,实际使用时推荐选择【无图片】选项。

人体检测数据返回格式

{
    "background":"base64xxxxxxxxxxxx",//背景图片,勾选页面中【回调图片】和【是否渲染】,会返回该字段
    "camera_id": 1,
    "camera_name": "usbcamera",
    "camera_sn": "",
    "fence_data": [],
    "height": 480,
    "models_id": [
        1
    ],
    "result_data": [
        {
            "extended": {
                "trackId": 1
            },
            "score": 0.958774209022522,
            "x0": 0.0,
            "x1": 0.9921875,
            "y0": 0.02291666716337204,
            "y1": 0.9750000238418579
        }
    ],
    "task_id": 1,
    "task_name": "人体检测",
    "task_type": "eb::body_tracking",
    "time": 1654159451989,
    "width": 640
}
    

HTTP模型推理服务接口

人体检测的模型推理服务接口与开发管理平台接口使用方法相同,推理结果与可视化页面模型管理中的效果验证结果相同。

HTTP模型推理服务接口使用请参考EdgeBoard开发管理平台使用说明-HTTP模型推理服务接口

上一篇
EdgeBoard人体关键点软硬一体方案说明
下一篇
EdgeBoard人体属性识别软硬一体方案说明