运行dialogue数据集bug

[youdianwangya]

你好，我在dialogue数据集上面运行的时候运行python generate_k_shot.py --data_dir ./dataset --k 8 --dataset dialogue这句代码，报下面错误，请问是什莫原因吗，期待你的回复，谢谢！

[njcx-ai]

您好，非常感谢您对本工作的关注。感觉您这里应该是读取数据时的报错。建议您可以检查数据格式并在get_labels()函数内debug模式定位具体问题呢。

[youdianwangya]

谢谢您的回复！是的，默认用的eval处理数据，但是我在运行dialogue数据集的时候，数据集格式是json，需要用json.load进行读取，可是一直报错，上面是默认的，下面是更改的（但不正确的），请问可以提供正确的数据读取吗？谢谢！

[youdianwangya]

您好，我详细表述一下我的问题，在运行dialogue数据集时，输入python generate_k_shot.py --data_dir ./dataset --k 8 --dataset dialogue显示图片错误

查询显示是在generate_k_shot.py文件中的

zhe'yi这段代码中 features.append(eval(line))不能很好处理.json文件，我查询之后将上述代码更改为用json.load或者json.loads处理。但是，发现semeval和dialogue两者不仅数据格式不同，而且具体的内容标签也不一样，semeval中的标签是relation 其中 negative_label="no_relation"，但是在dialogue数据集中标签是'r',以及负样本是unanswerable，然后我将上述数据加载代码更改为def get_labels(path, name, negative_label="unanswerable"):
count = Counter()
file_path = path + "/" + name
with open(file_path, "r", encoding='utf-8') as f:
features = []
for line in f.readlines():
line = line.rstrip()
if len(line) > 0:
try:
feature = json.loads(line)
features.append(feature)
relation = feature.get('r')
if relation == negative_label:
count[negative_label] += 1
elif relation is not None:
count[relation] += 1
except json.JSONDecodeError as e:
print(f"Error decoding JSON from line: {line}. Error: {e}")
continue
return features
但是显示错误如下

我目前的改错思路是这样的，不知道是否正确，麻烦您帮忙看一下，如果可以的话，请麻烦您告知一下数据加载这部分代码要如何更改才能读取到dialogue数据呢？非常感谢您认真阅读我的表述！期待您的回复！

[njcx-ai]

您好，从您的截图来看也比较难定位问题，会不会是操作系统编码或者库版本啥问题。另外dialogueRE数据集的数据格式跟其他数据集确实很不一样，我们在实际使用该数据集的时候主要参考的是基线方法GDPNet（https://github.com/XueFuzhao/GDPNet） 这个项目中的处理方式，也可供您参考。

[youdianwangya]

好的 非常感谢您的回复。

[zxlzr]

请问您还有其他问题吗？