中文Web检索评测参加流程

  1. 申请获得CWT100g数据

  2. 填写报名表格,(pdf), (doc)。 电子版发给闫宏飞(yhf@net.pku.edu.cn)。签字盖章后,硬拷贝发给黄蕊。 联系方式:+86-10-62765812(office), +86-10-62765813(fax), hr@net.pku.edu.cn 地址:北京大学计算机系,100871

  3. 参加单位用自己的信息检索技术在CWT100g上建立一个查询系统。

  4. 会前由评测组提供一个查询测试集,收集各个参加系统的查询结果。

  5. 按照一定的公开的规则,根据大家的查询结果形成最终查询结果。

  6. 根据最终的查询结果反过来评估各自的查询结果的质量,从而得到各个系统的查询质量。

  7. 为了公平,北大天网将不参加比赛,仅提供查询结果作为参考。



    注1: 报名截止日期2004年10月20日。10月21日发查询测试集,10月31日各参加队提交查询结果。
    注2: 查询集是从2002年4月到2004年6月天网日志中采样获得,搜索引擎的查询词通常较短,平均长度是2-3个词。


    北大网络实验室
    2004年6月16日