国际奖项 | 数美科技ai研究院斩获wassa2024全球挑战赛三项大奖！-皇冠hg8868登陆入口

近期，nlp国际顶会acl旗下的wassa 2024举办的全球挑战赛，最终成绩放榜。数美科技人工智能研究院nlp技术专家李田参与“共情检测和情绪识别”竞赛，在基于对话、文章和散文内容预测共情分数的三条赛道中，斩获两项亚军一项季军的优异成绩。李田的参赛论文“boosting llm’s prediction with role-play augmentation and contrastive reasoning calibration”（《通过角色扮演增强和对比推理校准提高 llm 的预测能力》）也成为wassa2024唯一一篇覆盖三条赛道的研究论文。

acl(the association for computational linguistics)是全球影响力最大、最具活力的国际学术组织之一，是自然语言处理与计算语言学领域最具权威性的专业学会。acl会议是nlp领域顶级会议，同时也是ccf 推荐的a类国际学术会议。依托acl举办的wassa （workshop on computational approaches to subjectivity, sentiment & social media analysis)是每年在自然语言处理（nlp）和计算社会科学领域举行的重要研讨会之一，重点关注如何运用计算方法来理解和分析自然语言中的主观性、情绪以及用户行为，其不仅是一个学术交流的平台，还设有竞赛评测任务。今年wassa2024 围绕共情检测和情绪识别，设置了两项全球性的比赛，数美人工智能研究院参加的是“共情检测和情绪识别”的比赛。

共情是指理解和分享他人的感受或经历的能力。它涉及识别、理解并与他人的情感、思想、动机和个性特征共享。由于共情表达依赖于人类反应，其评估通常需要对各种特征进行细微分析，例如潜在含义、引用和情感释放，因此在不同情境中识别共情一直是自然语言研究的热点。

wassa2024的竞赛还引入了多层次和多模态数据，包括新闻文章、散文和对话。它放弃了简单的分类标签，采用评分系统，不同的分数具有实际意义。所有赛题使用皮尔逊相关性作为评估指标。这些因素共同使得这场比赛异常具有挑战性。

数美人工智能研究院在本次竞赛中以llama3-8b-instruct作为基线模型， 引入了角色扮演模板来丰富训练样本，通过训练模型基于不同共情特质的打分来模拟人类的回复，从而让模型学会不同表达方式同共情程度之间的细微联系。同时，在实验中开发了对比监督微调（c-sft）和对比推理校准（crc）技术，以获得更可靠的评分生成。c-sft不仅提高了模型性能，还通过创建对比对来缓解数据稀缺问题。crc通过多轮比较思考，从而修正模型的打分预测，最终进一步提升打分的可靠性。

数美科技nlp技术专家李田现场分享论文成果

数美科技nlp技术专家、研究项目负责人李田表示：“我们的技术方案缓解了大语言模型在进行打分预测时的不确定性，尤其是在方差上的的问题。该方案只使用了均匀分布进行校准，未来任何人可以直接基于专家知识构建校准分布对输出进行校准。此外，该方案无需任何外部数据的介入，也无需使用更大的语言模型输出进行蒸馏，在易用性上具备独一无二的优势，可以轻松转移到其他类似任务。”

在数美的内容风控业务领域内，尤其是大模型的内容识别，对于情感的准确识别和分类至关重要。在以往对象与主题的标签体系下，必须对语言表达背后所隐含的意图、观点和目的做深入理解识别，这与共情检测与情绪识别极其类似。数美人工智能研究院期望在这种更具挑战的情感分析和识别场景上探索更有效的技术，推动该领域的技术进步和学术研究，通过进一步的技术探索，提升数美在大模型时代的内容风控能力，为aigc领域的内容生态发展发挥更多价值。

ai持续向前的大势下，数美科技作为一家以科技创新为驱动力的ai风控企业，在植根国内探索ai创新发展的同时，更以开放的姿态，紧跟全球技术发展的最前沿，数美人工智能研究院在wassa2024国际赛事上的成绩表现， 代表着数美在ai领域探索成果的国际化影响力。未来，数美科技继续探索技术的新边界，加强与国际伙伴的科技交流与合作，推动数美的人工智能风控技术更广泛的走向世界舞台

关于数美科技人工智能研究院：

数美科技人工智能研究院成立于2016年，由数十位在图像、语音、自然语言处理领域深耕多年的研究员、开发者和架构师组成，时刻走在深度学习等人工智能领域最前沿，推动数美数字风控从前沿技术到实用产品的落地创新，针对行业场景和客户需求不断开展高通用性、强定制化的模型策略研发工作。数美科技人工智能研究院独创业界首家娇喘识别技术，掌握上万种广告变体识别、账号设备风险分析等前沿技术。