想请教一下如何修改评价指标
收藏
用hub式做了一个NER的工程,train和eval函数里都没有找到评价指标的参数,求如何加入精确召回等
0
收藏
请登录后评论
不清楚hub怎么弄或行不行, 试过套件PaddleNLP么,一般套件功能更丰富
hub训练出的模型,可以用paddlenlp里的评估方式进行性能评估么
这就得看情况了,如果hub和nlp的模型库是完全一样的就肯定没问题,直接读取就可以了
如果有区别的话,就得自己改下套件的源码了。paddle本身就即可以读state dict格式存储的模型,也可以读inference格式存储的模型(这个带模型结构信息)。只要能用套件读出模型,就是利用一下评估代码的问题了
还有就是也可以把hub模型库的模型源码直接弄到paddlenlp里,反正都是开源的
我用hub2.0 ernie跑的,就想最后求个NER,chunk的指标。。。有没有点详细教程,谢谢大佬
我觉得可以返回结果,然后把结果记下来,自己重写评估指标……