开放能力
开发平台
行业应用
生态合作
开发与教学
资讯 社区 控制台
技术能力
语音技术
图像技术
文字识别
人脸与人体识别
视频技术
AR与VR
自然语言处理
知识图谱
数据智能
场景方案
部署方案
行业应用
智能教育
智能医疗
智能零售
智能工业
企业服务
智能政务
智能农业
信息服务
智能园区
智能硬件
EasyDL定制AI训练平台

    EasyDL文本介绍

    概述

    EasyDL平台的自然语言处理模型定制能力,是基于百度大脑文心领先的语义理解技术,为企业和开发者提供一整套NLP定制与应用能力。

    当前EasyDL平台提供了5种模型定制能力:

    • 文本分类-单标签

    定制分类标签实现文本内容的自动分类,每个文本仅属于一种标签类型

    • 文本分类-多标签

    定制分类标签实现文本内容的自动分类,每个文本可同时属于多个分类标签。

    • 短文本相似度

    可以将两个短文本进行语义对比计算,获得两个文本的相似度值

    • 文本实体抽取

    定制文本实体抽取模型,实现从文本中抽取内容,并将抽取内容识别为自定义的类别标签

    • 情感倾向分析的模型定制能力

    对包含主观信息的文本进行情感倾向性判断,情感极性分为积极、消极、中性

    可视化操作

    无需机器学习专业知识,通过模型创建-数据上传-模型训练-模型发布全流程可视化便捷操作,最快15分钟即可获得一个高精度模型

    操作步骤

    Step 1 创建模型

    确定模型名称,记录希望模型实现的功能

    Step 2 上传并标注数据

    不同类型的任务对应的数据格式不一致,您可以上传未标注数据并使用平台提供的标注工具进行标注。或直接上传各任务的标注数据

    Step 3 训练模型并校验效果

    选择部署方式与算法,用上传的数据一键训练模型

    模型训练完成后,可在线校验模型效果

    Step 4 发布模型

    根据训练时选择的部署方式,将模型部署到百度云或申请私有API本地部署使用

    更详细的操作指导,请参考各类模型的技术文档

    高精度效果

    EasyDL文本任务通过文心提供先进的预训练模型和百度自研的NLP算法集。

    文心ERNIE核心技术采用了百度NLP自研的基于知识增强的语义理解技术,其创新性地将大数据预训练与多源丰富知识相结合,通过持续学习技术,不断吸收海量文本数据中词汇、结构、语义等方面的新知识,实现模型效果不断进化,显著提升了文本定制模型任务的智能化水平。

    丰富的部署方案

    训练完成后,可将模型部署在公有云服务器、私有服务器

    部署方式 支持的硬件 支持的系统 技术文档
    公有云API 无需关注硬件,发布到公有云 不限制 文本分类、短文本相似度、情感倾向分析、实体抽取
    EasyEdge本地-私有服务器部署[私有API] x86-64 CPU Linux 文本分类、短文本相似度、情感倾向分析、实体抽取
    Nvidia GPU Linux 文本分类、短文本相似度、情感倾向分析、实体抽取

    公有云API

    已全面支持文本分类(单标签、多标签)、短文本相似度、情感倾向分析、实体抽取

    训练完成的模型存储在云端,可通过独立Rest API调用模型,实现AI能力与业务系统整合

    具有完善的鉴权、流控等安全机制,GPU集群稳定承载高并发请求

    私有服务器部署

    已全面支持文本分类(单标签、多标签)、短文本相似度、情感倾向分析,实体抽取(即将支持自动私有部署)

    EasyDL文本任务是使用EasyEdge本地部署服务,仅支持私有服务器部署API的本地化部署。

    将训练完成的模型部署在私有CPU/GPU服务器上,支持私有部署包通过API方式调用(简称私有API),可在内网/无网环境下使用模型,确保数据隐私

    私有API:将模型以Docker形式在本地服务器(仅支持Linux)上部署为http服务,可调用与公有云API功能相同的接口。可纯离线完成部署,服务调用便捷,支持Linux发行版本如下:

    • Ubuntu: 14、16、18
    • Centos:7.0及以上
    • redhat:7.2以上
    • suse 12
    上一篇
    EasyDL 图像使用说明
    下一篇
    文本分类-单标签