学术活动
中文信息学会句法分析评测(CIPS-ParsEval-2009)
2009-04-14
本次评测的总体目标,是充分利用现有树库描述资源,形成统一开放的训练测试集合;设计合适的评测任务,对汉语“字/词→块→句”不同层次的句法分析技术进行比较全面的评测;通过大规模评测,开发针对不同任务的有效处理工具,为不同应用提供有效的不同层次的汉语文本分析工具。
本次评测计划在2009年11月完成,具体计划如下:
2009.4.5.:在网上公布评测任务和数据集设计方案、具体评测计划和参加方法等相关信息,并公布针对5个任务的相关实验数据,各个感兴趣的研究人员可以自由下载,进行相关研究方法探索。
2009.4.5—2009.5.31.:各个单位确定合适的任务,并正式报名;
2009.6.1.:根据各个单位参加任务情况,发送相应的正式训练数据;
2009.6.1—2009.8.31.:各个单位利用训练数据进行相关评测任务的分析模型开发和调试;
2009.9.1.:根据各个单位参加任务情况,发送相应的正式测试数据;
2009.9.4.(deadline):各个单位提交最终的评测结果;
2009.9.5.--- 2009.10.10.:主办方进行相关任务的分析评测,形成完整的分析测试报告;同时参赛方进行相关模型总结,完成相关论文和研究报告;
2009.10月下旬:召开学术研讨会(计划与青年学者研讨会捆绑进行),公布评测结果,同时各单位汇报各自使用的模型和分析方法,并对相关分析技术进行深入讨论;
2009.11月:汇总形成本次评测的完整会议录(各个参评者的研究报告/论文+ppt),在CIPS-ParsEval-2009网站上公布。
详细信息请访问:http://www.ncmmsc.org/CIPS-ParsEval-2009/index.asp