ChatGPT可否充当情感专家?——调查其在情感与隐喻分析的潜力OA北大核心CSTPCD
为了探索ChatGPT情感分析能力以及对主观性和隐喻性理解的潜力,将ChatGPT在5个情感、幽默与隐喻基准数据集上展开评估,通过与领域内最前沿的模型对比,讨论其在不同任务上的优势与局限。此外,还通过对比ChatGPT与人类在情感分析中的性能差别,发现ChatGPT在情感、幽默与隐喻任务上与人类结果分别相差9.52%,16.64%和6.69%。实验结果表明,尽管ChatGPT在对话生成方面获得最佳表现,但是其在情感理解方面仍具有改进的潜力。最后,通过改善提示模板,调查ChatGPT在情感理解场景下对提示模板的敏感性。
张亚洲;王梦遥;戎璐;俞洋;赵东明;秦璟;
郑州轻工业大学软件学院,郑州450002 香港理工大学护理学院,中国香港999077郑州轻工业大学软件学院,郑州450002郑州轻工业大学人事处,郑州450002中国移动通信集团天津有限公司人工智能实验室,天津3000201香港理工大学护理学院,中国香港999077
计算机与自动化
ChatGPT情感分析幽默检测隐喻识别
《北京大学学报(自然科学版)》 2024 (001)
P.43-52 / 10
国家自然科学基金青年基金(62006212);中国博士后科学基金(2023M733907);信息物理社会可信服务计算教育部重点实验室开放基金(CPSDSC202103);Project of Strategic Importance Grant of the Hong Kong Polytechnic University(1-ZE2Q)资助。
评论