由中国中文信息学会计算语言学专委会（CIPS-CL）主办，大连理工大学信息检索实验室（DUTIR）承办，小牛翻译有限公司独家赞助的CCL 2019“小牛杯”中文幽默计算评测研讨会于2019年10月19日在云南昆明圆满落幕。作为CCL的系列评测，大连理工大学信息检索实验室承办了CCL 2019“小牛杯”中文幽默计算评测，并与第十八届中国计算语言学大会（CCL 2019，2019年10月18日~20日，云南昆明）共同召开。本活动旨在通过每年的中文幽默计算评测，为学者提供交流沟通的平台，并与相关领域学者共同推进中文幽默理解的技术水平。
今年的幽默计算评测任务分为两个子任务。子任务一是生成幽默识别，该任务旨在通过对幽默产生机制的分析，实现对计算机生成幽默的识别，进而作为评估如对话系统、聊天机器人智能性的重要指标。子任务二是中文幽默等级划分，该任务在去年幽默等级任务的基础上，新增了一个幽默等级，在一定程度上提高了任务的难度。该任务旨在通过分析幽默的内容，探索对幽默等级划分有效的方法，即预测不同幽默的有趣度。
幽默是人类智能的重要体现。幽默计算是近年来自然语言处理领域的新兴研究方向之一，它主要研究如何利用计算机技术进行幽默文本的识别、分类及生成。目前的幽默识别工作多使用英文数据集，缺少对中文数据集的研究。本届中文幽默计算评测在上一届的基础上，提出了新的评测任务，并贡献了新的中文幽默语料。本次评测分为五个阶段进行，在前四个阶段，评测公开了训练集，并发布开发集供参赛队伍进行模型调试。在第五个阶段，评测发布完整的测试集对参赛队伍的模型进行测试打分，并使用该分数作为队伍的最终排名依据。
CCL 2019“小牛杯”中文幽默计算评测研讨会于2019年10月19日下午4点准时开始。大连理工大学信息检索实验室的林鸿飞教授在评测研讨会上进行了开幕致辞。林鸿飞教授介绍了举办中文幽默计算评测的初衷，表达了希望通过评测进一步推动计算机“识趣明理”的深切愿景。大连理工大学信息检索实验室的杨亮老师对本次评测的参赛情况做了展示与总结。
林鸿飞教授开幕致辞
杨亮老师做评测总结
随后，本次评测的获奖队伍对各自的评测方案作了报告，介绍了评测中使用的模型以及比赛心得，并且回答了与会嘉宾的提问。去年CCL 2018中文幽默评测任务的参赛队伍，主要使用了基于CNN、LSTM以及Attention三个模块的深度学习模型，并采用集成学习的方式，综合考虑多个模型的结果作为最终的预测结果。相较去年，CCL 2019“小牛杯”中文幽默计算的参赛队伍主要采用了预训练语言模型、多任务学习和数据增强的方法。可以发现，预训练语言模型是今年幽默评测的主流选择，模型在幽默评测中的效果较好。值得关注的是，队伍在幽默评测中，已经开始尝试使用深度学习的方法刻画幽默的一些特点，以增强模型的性能。在未来，我们期待有更多工作关注中文幽默计算，并加以深入分析。最后，林鸿飞教授与小牛翻译代表为获奖队伍颁奖，并与各个获奖队伍合影留念。
参赛选手分享评测方案
与会嘉宾提问


林鸿飞教授与小牛翻译代表为获奖队伍颁奖随着获奖单位精彩报告的结束，CCL 2019“小牛杯”中文幽默计算评测研讨会圆满落幕。评测委员会欢迎各位专家、老师、同学积极关注CCL中文幽默计算系列评测，进一步推动中文信息处理的研究。
长按二维码   关注我们