用我的数据集做预测时，遇到了一个问题
64rmb opened this issue · 17 comments
我有一个只有正负情感标注的数据集，在模型预测情感时常常结果完全相反：
正向的句子argmax后结果总是0（负向），而负向的结果总是1，然而我的数据集正向的样本远多于负向。
列举几个改动：
数据标注：
同中文的几个数据集，做0/2标注。训练测试八二分，训练行数33w行左右。
模型保存与加载：
预测输出：
在用公开数据集的时候，预测结果比较正常，然而换成我自己的数据集，情感预测非常不正常。困扰了几天，没想出来是哪里出了问题，请教您一下。
另外，我的gpu服务器是局域网的，尝试过pysbsa这个库，无论我是否导入预训练checkpoint都会报无法联网下载的错，所以如果您能对以上问题做回复的话，非常感谢！
我又看了半天，原来我polarity没有传入lcf_atepc的时候，声明了一个同大小的zeros tensor当作polarity，改成全-1就正常了。。但是为什么公开数据集没这个问题呢？？未解之谜
你好，可以引用一下有问题的代码吗，这个库很久没有维护过了，印象不深
另外，我的gpu服务器是局域网的，尝试过pysbsa这个库，无论我是否导入预训练checkpoint都会报无法联网下载的错，所以如果您能对以上问题做回复的话，非常感谢！
请问报错的代码是哪里，我看后面有没有时间改成离线可用
你好，可以引用一下有问题的代码吗，这个库很久没有维护过了，印象不深
请问最新的代码是移到了这里吗？https://github.com/yangheng95/PyABSA/blob/release/pyabsa/core/atepc/models/lcf_atepc.py
是的
是的
我看到lcf_atepc.py最新的代码里去掉了BertSelfAttention。
因为我正在学习您的论文《A multi-task learning model for Chinese-oriented aspect polarity classification and aspect term extraction》，我想复现并引用的话，以哪个版本的代码为准呢？谢谢
学术研究的话都可以，如果是做落地运用请以最新为准，兼顾了效率和效果，并且PyABSA中的新版模型的ATE效果超出paper上的结果。具体数据可以在PyABSA的readme中查看
非常感谢解答。
你可以邮箱联系我，我给你联系方式
你可以邮箱联系我，我给你联系方式
好的，谢谢。
我有一个只有正负情感标注的数据集，在模型预测情感时常常结果完全相反：
列举几个改动： 数据标注：
模型保存与加载：
预测输出：
在用公开数据集的时候，预测结果比较正常，然而换成我自己的数据集，情感预测非常不正常。困扰了几天，没想出来是哪里出了问题，请教您一下。
你好，想问下先运行哪个再运行哪个呀
我只有一个正负情感标签的数据集，在模型预测情感时通常结果完全正确： 正向的句子argmax后结果总是0（负向），而负向的结果总是1，但是我的数据集合正向的样本远多于负向。
列举几个标签： 数据标注： 同中文训练的几个数据集，做0/2标注。训练测试八二分，行数33w行左右。
模型保存与加载：
预测输出：
在使用公开数据集的时候，预测结果比较正常，但是换成我自己的数据集，情感预测非常不正常。困扰了几天，突然出现了哪里生长问题，请教您一下。
请问模型保存和预测是自己写的吗
是自己写的，这个问题其实是embedding初始化的问题，已经解决了 ---- 回复的原邮件 ---- | 发件人 | @.> | | 发送日期 | 2023年08月17日 18:37 | | 收件人 | yangheng95/LCF-ATEPC @.> | | 抄送人 | 64rmb @.>, Author @.> | | 主题 | Re: [yangheng95/LCF-ATEPC] 用我的数据集做预测时，遇到了一个问题 (Issue #48) | 我只有一个正负情感标签的数据集，在模型预测情感时通常结果完全正确： 正向的句子argmax后结果总是0（负向），而负向的结果总是1，但是我的数据集合正向的样本远多于负向。 列举几个标签： 数据标注： 同中文训练的几个数据集，做0/2标注。训练测试八二分，行数33w行左右。 模型保存与加载： 预测输出： 在使用公开数据集的时候，预测结果比较正常，但是换成我自己的数据集，情感预测非常不正常。困扰了几天，突然出现了哪里生长问题，请教您一下。 请问模型保存和预测是自己写的吗 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>
请问可以求一下您的代码吗😢自己学习使用，真的打扰了