在AI.Baidu.com上看到的描述但技数文档中没有?
jackdiy 发布于2017-04 浏览:1784 回复:4
0
收藏

1、拼写纠错

针对用户输入的query中经常出现拼写错误的情况,语言模型可以给出一个基于句子上下文概率最高的词对用户的输入进行纠错

这一项功能我并未在AI.Baidu.com 提供的技术文档中看到可调用的说明?


2、语言模型

语言模型是通过计算给定词组成的句子的概率,从而判断所组成的句子是否符合客观语言表达习惯

通常用于机器翻译、拼写纠错、语音识别、问答系统、词性标注、句法分析和信息检索等

应用于识别用户的无意义问句、评论
 用于识别用户输入的句子是否符合语言表达习惯,便于识别用户后续需求


该功能是否支持对短文本的识别 ,除了应用到评论、对话系统中,是否对某些标签Tag的纠错、无意义、反黄、反广告起到作用?


NLP相关咨询:

1、最近我们看到百度AI的一些NLP能力后在思考是否我们在构建一个站内的“语义搜索”功能时,NLP可以提供:同义词、近义词搜索的支持
 比如我们搜索:孩子们喜欢的,应该可以返回:儿童、小孩、0~10岁、教育 等等相关的内容。

2、在构建一个好的站内检索功能时,我们往往希望有一种NLP的能力给到支持让机器理解用户到底想要找什么,比如用户检索“谢霆锋和张卫健”,或其他长尾词甚至一句话,我们应该给用户返回的是,小鱼儿与花无缺等相关的内容,这里涉及 自然语言理解、分词、纠错等相关的情况。


收藏
点赞
0
个赞
共4条回复 最后由周俊316回复于2017-05
#5周俊316回复于2017-05
#4 jackdiy回复
1、何时会推出纠错API呢? 辅助运算意义不是特别大,通用场景较少,如果上下文已经比较正常,功能意义有折扣 比如我们输入 周姐轮 其实肯定可以建议 用户是否应该输入的是「周杰伦」 NLP 1、同义词与近义词 的返回并不是用在相似度计算上,我认为那个场景也很狭窄  1)在我们正常理解中 “孩子们喜欢的”  应该与:儿童、小孩、0~10岁  等等词汇同义或相近,其实直接在站内检索 “孩子们喜欢的” 肯定没有结果,这个使用场景的意思是,我们直接返回同义词的检索结果给到用户 2)分类标注 这个不太理解你们是怎么定义的?是未来考虑开放的一种能力吗? 2、有关“相关推荐”,有什么建议呢?
展开

1、何时会推出纠错API呢?

您好,这个暂时还没有具体的时间,推出后我们会发公告同步大家


2、感谢您的建议,我们会进一步改进。“相关推荐”这个暂时可以使用相似度试试,暂且没有直接的接口,谢谢您


后续推出新的服务时,公告大家

0
#4jackdiy回复于2017-04

1、何时会推出纠错API呢?
辅助运算意义不是特别大,通用场景较少,如果上下文已经比较正常,功能意义有折扣
比如我们输入 周姐轮 其实肯定可以建议 用户是否应该输入的是「周杰伦」

NLP
1、同义词与近义词 的返回并不是用在相似度计算上,我认为那个场景也很狭窄
 1)在我们正常理解中 “孩子们喜欢的”  应该与:儿童、小孩、0~10岁  等等词汇同义或相近,其实直接在站内检索 孩子们喜欢的” 肯定没有结果,这个使用场景的意思是,我们直接返回同义词的检索结果给到用户

2)分类标注 这个不太理解你们是怎么定义的?是未来考虑开放的一种能力吗?


2、有关“相关推荐”,有什么建议呢?

0
#3周俊316回复于2017-04

您好,非常感谢您的关注和耐心等待

1,拼写纠错

目前还没有专名的纠错API,但是语言模型这个API可以用在纠错的辅助计算上,链接- http://yuyin.baidu.com/asr 

举个例子

比如这个例子里面,发现“展开”、“起飞”都不合适,纠正为启动


2,语言模型

这个无法做到直接应用,只能作为辅助特征,需要根据具体应用场景做实验和调整工作


NLP相关咨询:

1、最近我们看到百度AI的一些NLP能力后在思考是否我们在构建一个站内的“语义搜索”功能时,NLP可以提供:同义词、近义词搜索的支持
 比如我们搜索:孩子们喜欢的,应该可以返回:儿童、小孩、0~10岁、教育 等等相关的内容。

这个,词的相似度计算我们是有API的,已经在网站上 http://ai.baidu.com/tech/nlp/simnet 点击“立即使用”

但是“返回:儿童、小孩、0~10岁、教育 等等相关的内容”,这个属于分类标注,暂时还没有


2、在构建一个好的站内检索功能时,我们往往希望有一种NLP的能力给到支持让机器理解用户到底想要找什么,比如用户检索“谢霆锋和张卫健”,或其他长尾词甚至一句话,我们应该给用户返回的是,小鱼儿与花无缺等相关的内容,这里涉及 自然语言理解、分词、纠错等相关的情况。

这个需求本身是“相关推荐”,目前还没有,这个可以利用词的相似度计算作为辅助来进行实现,当然只用这一个方法效果并不会很理想,后续有技术开放更新,随时同步给您



0
#2周俊316回复于2017-04

您好,收到您的反馈,稍等一一答复

0
TOP
切换版块