首页 PaddleHub 帖子详情
想请教一下如何修改评价指标
收藏
快速回复
PaddleHub 问答预训练模型 680 7
想请教一下如何修改评价指标
收藏
快速回复
PaddleHub 问答预训练模型 680 7

用hub式做了一个NER的工程,train和eval函数里都没有找到评价指标的参数,求如何加入精确召回等

0
收藏
回复
全部评论(7)
时间顺序
FutureSI
#2 回复于2021-10

不清楚hub怎么弄或行不行, 试过套件PaddleNLP么,一般套件功能更丰富

0
回复
E
EvilCalf
#3 回复于2021-10
不清楚hub怎么弄或行不行, 试过套件PaddleNLP么,一般套件功能更丰富

hub训练出的模型,可以用paddlenlp里的评估方式进行性能评估么

0
回复
FutureSI
#4 回复于2021-10

这就得看情况了,如果hub和nlp的模型库是完全一样的就肯定没问题,直接读取就可以了

0
回复
FutureSI
#5 回复于2021-10

如果有区别的话,就得自己改下套件的源码了。paddle本身就即可以读state dict格式存储的模型,也可以读inference格式存储的模型(这个带模型结构信息)。只要能用套件读出模型,就是利用一下评估代码的问题了

0
回复
FutureSI
#6 回复于2021-10

还有就是也可以把hub模型库的模型源码直接弄到paddlenlp里,反正都是开源的

0
回复
E
EvilCalf
#7 回复于2021-10

我用hub2.0 ernie跑的,就想最后求个NER,chunk的指标。。。有没有点详细教程,谢谢大佬

0
回复
深渊上的坑
#8 回复于2021-10

我觉得可以返回结果,然后把结果记下来,自己重写评估指标……

0
回复
需求/bug反馈?一键提issue告诉我们
发现bug?如果您知道修复办法,欢迎提pr直接参与建设飞桨~
在@后输入用户全名并按空格结束,可艾特全站任一用户