1、微博情感分析评测总结第一届自然语言处理与中文计算会议第一届自然语言处理与中文计算会议2012年年 11月月 2日日1北京大学计算机科学技术研究所北京大学计算机科学技术研究所2苏州大学计算机科学与技术学院苏州大学计算机科学与技术学院3哈工大深圳研究生院计算机科学与技术学科部哈工大深圳研究生院计算机科学与技术学科部万小军万小军 1、李寿山、李寿山 2、徐睿峰、徐睿峰 3任务设置 观点句识别 情感倾向性判断 针对观点句 情感要素 抽取 针对观点句数据集 来自腾讯微博数据 原始数据集 20话题 主要是热门事件，如 “ 三亚春节宰客 ” 约 17500条微博 约 32000个句子数据集 数据标注 三标注
2、者对同一数据标注 数据集大小 2023条微博 3416个句子 1209个非观点句 2207个观点句 407正面、 1766负面、 34其他 2361个对象 441正面、 1910负面、 10其他数据集 标注标准 关于观点句 个人意愿、心情不是观点句，如 “ 我感到很高兴 ” 表达了明显观点的反问句属于观点句，如 “ 体育竞技有不残酷的吗？ ” 关于观点句倾向性 正面、负面，其他 (Other)三类， “ 其他 ” 表示中性或无法确定正负的情况 不进行数据集 标注标准 关于观点句情感对象 情感对象优先从当前句子抽取，但可以跨越当前句子从前面的句子或后面的句子中抽取（前面的邻近句子优先） 情感对象
3、尽可能完整和明确，事件按细粒度标注：“ ipad的屏幕 很棒！ ” - “ ipad的屏幕 ”“ 官二代 陶汝坤 :作案动机 极其卑劣 ” - “ 作案动机 ” 对象本身不是情感表达：” #官二代 求爱不成将少女毁容 # 这种 畜生 是怎么被教育出来的啊！ ”- “ 官二代 ” 人称代词需要尽可能在当前微博内进行指代消解：“ 小明 就读于北京大学， 他 是名优秀的学生。 ” -” 小明 “ 抽取出句子中每个情感片段所对应的情感对象：“ 你 根本已经不是个人了， 你 比蛇还冷血， 你 比畜生还畜生。 ”- “ 你 ” “ 你 ” “ 你 ”参评单位 34支队伍 包括全国重点高校与科研机构 观点句识别： 53组 情感倾向判断： 48组 情感对象 抽取： 22组观点句识别 任务要求 识别每条微博中各个句子是观点句还是非观点句 评价 标准 准确率、召回率、 F值 微平均 宏平均观点句识别 微平均观点句识别 微平均
