真心在用,真心建议
lovegoogle1234 发布于2019-01 浏览:2199 回复:6
0
收藏

1,我们在用API调用接口的方式调用UNIT,然后呢我们每次请求完训练后,就会有10-20秒的时间是无法对话的。建议优化一下,就是在下一个模型训练完成之前请先用上一个模型进行回答,保持正常的对话畅通。

2,关于线上生产环境,需要提交工单,是很麻烦的,因为我们几乎每时每刻在调整,即使客户上线了也是如此,所以上面这一条非常重要

收藏
点赞
0
个赞
共6条回复 最后由伊茨米可回复于2019-01
#8伊茨米可回复于2019-01
#5 lovegoogle1234回复
非常感谢,我们马上去提交工单。 并不是这样的,我认为更改频繁几乎是必然的,我给你举几个例子: 1,因为我们不一定是自己用,而是给我们的客户提供工具(我们使用了百度api给客户提供服务),客户修改时希望马上生效的。图灵机器人和小i机器人里面的对话能力都是即时修改即时生效。 2,对话和APP不同的是,APP是可以完整测试,对话是难以做到的,因为对话设计的东西太多(涉及无数的问法,并不是测试人员可能想完的),所以对话实际上更应该是持续学习更新的(恨不得是实时的更新) ------ 所以我认为频繁的更新是必要的,所以生产环境应该支持频繁更新。这是我的看法供参考  
展开

您好:

感谢您的回复。

关于1,我觉得可能还需要具体看下希望生效的范围。如其他回复您的同学,我认为适合一些对话逻辑配置的修改,但是训练师数据的还是不太建议,风险极大,很可能某一个case识别了,但整体识别率大幅度下降。

关于2,其实和1类似,如果是对话效果的修改,建议经过充分测试再应用到线上。

0
#7lovegoogle1234回复于2019-01
#3 静水云天666回复
关于问题1,很好的建议。我们已经在小流量实验了,预期在2019.02月份,对于新建的技能,该功能会全流量上线,训练切换时间会降低到3s左右(毕竟是沙盒环境,所以需要平衡体验和成本,极致的体验需要更高的成本,我们也会持续优化)。对已有的技能,需要一个退出过程,进行平滑过渡。感谢您对UNIT的支持,也欢迎进行批评建议~~
展开

好的,谢谢

0
#6lovegoogle1234回复于2019-01

非常感谢,我们马上去提交工单。

并不是这样的,我认为更改频繁几乎是必然的,我给你举几个例子:

1,因为我们不一定是自己用,而是给我们的客户提供工具(我们使用了百度api给客户提供服务),客户修改时希望马上生效的。图灵机器人和小i机器人里面的对话能力都是即时修改即时生效。

2,对话和APP不同的是,APP是可以完整测试,对话是难以做到的,因为对话设计的东西太多(涉及无数的问法,并不是测试人员可能想完的),所以对话实际上更应该是持续学习更新的(恨不得是实时的更新)

------

所以我认为频繁的更新是必要的,所以生产环境应该支持频繁更新。这是我的看法供参考

 

0
#5lovegoogle1234回复于2019-01
#2 伊茨米可回复
你好: 请问您的1是沙盒环境还是生产环境呢?沙盒用于对话效果测试,生产用于接入业务,用途不同,背后的技术也不同,建议您接入业务时用生产环境。另外,有时候沙盒环境整体整体升级时,也会造成短暂服务不可用,因此如果您对服务稳定性有严格要求,不建议您将沙盒作为接入业务的环境。 关于生产环境,只是首次开通权限时需要提交工单,后续您可以直接通过管理API自行操作。但从您的描述中,感觉您在使用时有一个误区,就是接入业务的环境应该是经过严格的效果测试的,而不是训练完直接生效,因此生产环境中模型的更新频率,应该不会很高,就像APP发版一样。
展开

非常感谢,我们马上去提交工单。

并不是这样的,我认为更改频繁几乎是必然的,我给你举几个例子:

1,因为我们不一定是自己用,而是给我们的客户提供工具(我们使用了百度api给客户提供服务),客户修改时希望马上生效的。图灵机器人和小i机器人里面的对话能力都是即时修改即时生效。

2,对话和APP不同的是,APP是可以完整测试,对话是难以做到的,因为对话设计的东西太多(涉及无数的问法,并不是测试人员可能想完的),所以对话实际上更应该是持续学习更新的(恨不得是实时的更新)

------

所以我认为频繁的更新是必要的,所以生产环境应该支持频繁更新。这是我的看法供参考

 

0
#3静水云天666回复于2019-01

关于问题1,很好的建议。我们已经在小流量实验了,预期在2019.02月份,对于新建的技能,该功能会全流量上线,训练切换时间会降低到3s左右(毕竟是沙盒环境,所以需要平衡体验和成本,极致的体验需要更高的成本,我们也会持续优化)。对已有的技能,需要一个退出过程,进行平滑过渡。感谢您对UNIT的支持,也欢迎进行批评建议~~

0
#2伊茨米可回复于2019-01

你好:

请问您的1是沙盒环境还是生产环境呢?沙盒用于对话效果测试,生产用于接入业务,用途不同,背后的技术也不同,建议您接入业务时用生产环境。另外,有时候沙盒环境整体整体升级时,也会造成短暂服务不可用,因此如果您对服务稳定性有严格要求,不建议您将沙盒作为接入业务的环境。

关于生产环境,只是首次开通权限时需要提交工单,后续您可以直接通过管理API自行操作。但从您的描述中,感觉您在使用时有一个误区,就是接入业务的环境应该是经过严格的效果测试的,而不是训练完直接生效,因此生产环境中模型的更新频率,应该不会很高,就像APP发版一样。

0
TOP
切换版块