【新功能上线】EasyData上线高级清洗!
置顶
May的山楂木 发布于2020-08 浏览:31747 回复:9
1
收藏
最后编辑于2023-10

考虑到开发者使用数据清洗时,通常情况下需要与具体业务场景相结合的情况,EasyData近期升级,重磅上线过滤无人体/无人脸图像高级清洗功能!

 

在园区智能管理等场景下,需要监测工厂园区、林区中是否有人闯入。为了满足此类场景下的图片清洗需求,EasyData上线了高级清洗功能,将无人脸、无人体出现的数据进行过滤。虽然EasyData平台本身并没有人脸识别、人体识别的能力,但用户仅需在百度云上开通相应的服务(人脸检测和人体检测都可以免费试用),就可以直接使用这些功能。

 

1、过滤无人脸图片

如果以前没有用过百度智能云的人脸检测服务,第一次使用高级清洗的功能会提示”申请免费试用”,点击链接会进入百度智能云人脸检测的页面,按照提示,开通服务后,再回到EasyData的页面就可以正常使用了。

和基础的数据清洗服务一样,过滤无人脸图片也是以数据集为单位的。在数据清洗页面选择过滤无人脸图片,点击保存,提交任务就可以进行清洗。如果勾选了”保留标签”,那么不仅会把没有人脸的图片过滤,还会将人脸画框同步至清洗后的数据集。

提交任务时勾选保留人脸画框

 

例如下图,清洗前的数据集除了人脸图片,还有一些风景照、车辆等其他物体的照片,人脸过滤会把这些没有人脸的图片过滤,保留下来包含人脸的图片,包括戴口罩,被遮挡的人脸也可以识别出来。

清洗前的数据集中有人脸照片、风景照、静物照

 

清洗后的数据集只有人脸照片被保存下来

 

2、过滤无人体图片

过滤无人体图片同样会用到百度智能云的人体检测能力,在使用之前需要在百度智能云上开通相应的服务。过滤无人体图片会用到两个接口:

人体检测和属性分析:https://ai.baidu.com/tech/body/attr

人像分割 :https://ai.baidu.com/tech/body/seg

数据集模板为图像分类和物体检测的数据集会调用人体检测和属性分析接口,数据集模板为图像分割的数据集会调用人像分割接口。百度智能云上的人像分割接口返回的是人像图片对应的二值图片(人像为1,背景为0),在后端会执行相应的标签转换,返回的二值图片转换成对应的标签。

清洗前的数据集中有风景图、静物图和人体图

 

人体过滤保留的5张人体图片

模板为图像检测的数据集清洗后的标签

 

模板为图像分割的数据集清洗后的标签

 

目前的数据清洗服务所能支持的最大数据集大小是5万张片,基于EasyData平台的大数据处理平台,对于基础清洗服务,2万张图片的数据集,大约1小时可以完成清洗。5万张图片的数据集,大约2小时可以清洗完成。对于高级清洗来说,清洗的速度取决于开通服务的QPS。

EasyData是百度大脑推出的业内首个提供软硬一体、端云协同的智能数据采集服务的平台,支持图片、文本、音频和视频四类数据的处理,其中图片数据支持了采集、清洗、标注一站式处理,覆盖模型开发中的各类数据管理需求。且四类数据都已经支持将EasyData处理的数据应用于EasyDL模型训练,便于开发者直接使用,高效开发AI模型。

立即体验EasyData:https://ai.baidu.com/easydata/

收藏
点赞
1
个赞
共9条回复 最后由192******14回复于2023-10
#17192******14回复于2023-10

0
#16蚜5f4qxn4乀虫回复于2023-09

??郑凯启鹅??5310129??输入网??456qy點vip??输入網自带邀请玛??一 对 一 经历。最重要还是要找对一个能引领你的人我是这么认为的:心态只能让我们锦上添花,但是并不能给我们雪中送炭,一个人光有心态,肯定是不够的,只不过良好的心态可能让你亏的比较少而已,但是你也是在亏,因为心态根本解决不了概率的问题,概率问题是只有技术才能解决举个例子,一个人如果技术够好,那么他挂的可能性就比较小,一个人之所以心态不好,很多时候是因为连着挂,所以技术如果足够好,很多时候可以弥补我们心态的一些缺陷,所以技术远远要比心态重要的多,因为技术是肯本,心态只是辅助,两者缺一不可! 做任何一个行业,做任何一个事情,领路的人都是非常关键的,但是自己也要清楚,自身有实力才是真的,所以说有一句话师傅领进门修行靠个人,我玩这个这么多年了,我可以带你们!毕竟玩这个想要盈,只有两条路:一是靠自己的亏来学经验,不过很多人即使亏也未必能学到精髓;二是跟着过来人学习现成的经验;领路人一定要找对,会让你受益一生;选择大于 努力,眼光比能力跟重要,跟过我你就知道

0
#15用户已被禁言回复于2023-09

第一输入网址 t l 5 2 2 1 1 . C 0 M

第二步、点击主页右上角的“注册”填写一个你想要的账号。l j s 1 9 9 4 0 0  vi vi  x x

第三步、在弹出的注册窗口中,填写手机号码、验证春码和密码等信息,

然后勾选用户协议,点击“注册”账号。页面会提示注册成功或账号已存在,别人注册过的,同一个账号永久不会重复的。

第四步、系统会向手机发送一条验证码如信,输入验证码后,点击“确认”按钮,表示注册好了。

0
#7专业沉贴20年回复于2020-10

没有找到在哪里上传数据集

0
#6wildwood10回复于2020-09

好功能

0
#5贼JB666回复于2020-08

厉害

0
#4188******76回复于2020-08

哇塞!棒!

0
#3用户已被禁言回复于2020-08

好嗨啊

0
#2f58K1G9x5hG回复于2020-08

好呀

0
快速回复
TOP
切换版块