MachineSheep

Results 7 issues of MachineSheep

UIE实体识别在验证集上每一种实体类别的Precision, Recall, F1值都偏高,但整体的Precision, Recall, F1比较低,想了解一下UIE实体识别评价指标的计算公式,感谢!!!

ie

**建议UIE模型代码结构中加入数据格式校验脚本**,因为大多数用UIE模型的数据来源都是已经打标的数据,需要自己手动编写数据格式转换脚本把原有的数据格式转换成模型输入的数据格式(或者转换成doccano.py文件输入的数据格式),然而上万条数据转换后,其中可能会因为自己编写的转换脚本不够全面,而导致少量的数据格式有问题,难以排查,从而导致模型训练报错。

enhancement

![image](https://user-images.githubusercontent.com/109952192/185278441-17bea3d2-627e-4af9-be7c-984589896105.png) 这里的Taskflow中加入batch_size参数是没有作用的,抽取三条文本,batch_size=1和batch_size=3的效率是一样的,还测试了其他情况,都证明batch_size参数没有作用,gpu的利用率都是80%左右,gpu的显存利用率都是20%左右,请问这是为什么呢?

### 请提出你的问题 **完整的报错信息如下** RuntimeError Traceback (most recent call last) Input In [7], in () 1 schema = ['Time', "date"] ----> 2 ie2 = Taskflow('information_extraction', schema=schema, model="uie-m-large", schema_lang="en") File ~/work/202211/event/paddlenlp/taskflow/taskflow.py:543, in...

question

### 请提出你的问题 uie-base-en模型zero-shot在国家,城市实体类别上表现效果较差,大佬有什么建议吗?感谢

question

### 请提出你的问题 UIE Slim 数据蒸馏, 有学生模型评估的代码吗

question

请问一下GPLinker支持英文事件论元抽取吗?