首页 版块 访问AI主站 注册 发帖
首页 自然语言处理 帖子正文
dygraph的FC是不是有bug？
chenyh2009cyh 发布于2020-02 浏览:1241 回复:1
0
收藏
dygraph的FC是不是有bug？
快速回复

从官方的github clone了dygraph的transformer

发现不能用里面的Linear，用FC代替了，还做了一点点其他修改

模型用的是wmt16_ende_data_bpe_clean

单独测试encoder和decoder的时候没问题，但是组合到一起的时候，每次都会在不同的FC层出问题

想请教一下

出问题的模型，我已经设置为公开，训练集为wmt16_ende_data_bpe_clean.tar.gz。没有打包进去，需要弄一下

技术问答
收藏
点赞
0
个赞
共1条回复 最后由chenyh2009cyh回复于2020-02
#2chenyh2009cyh回复于2020-02

是multi attention下的FC，每次都会停在不同的fc 上

0
快速回复
小编推荐
【强化学习算法】原理介绍
猪腰子3 12回复
【强化学习算法】PARL介绍、常见问题和解决方法
猪腰子3 12回复
【强化学习算法】常见应用
猪腰子3 7回复
NLP常见问题汇总
用户已被禁言 8回复
第三期【百度大脑新品体验】手写诗一首，AI来读
wangwei8638 66回复
TOP
切换版块
操作指南
常见问答
平台公告
经验交流
技术专区
文字识别
人脸识别
语音技术
PaddlePaddle
EasyDL
BML
EasyData
AI Studio
UNIT
人体分析
图像搜索
图像识别
内容审核
自然语言处理
机器人视觉
视频技术
增强现实
知识图谱
智能创作
智能呼叫中心
文心
EdgeBoard
DuerOS
EasyEdge
度目硬件
百度AI市场
Doris
AI赛事
百度之星大赛
AI Studio人工智能竞赛
语言与智能技术竞赛
千言数据集
集思广益
共享工具
头脑风暴
成果展示
AI文档中心 SDK下载 Github 百度AI开放平台
©2018 Baidu 使用百度前必读
智能客服