科技部公开招募建设AI性能评估数据集项目

Photo of author

By Global Team

科学技术信息通信部宣布,与韩国智能信息社会振兴院(NIA)合作,从7月17日至8月7日公开招聘“性能评价数据集建设项目”的执行机构。

该项目的目的是构建符合国内实际情况的数据集,以便客观评估“自主人工智能基础模型”的性能。总项目预算为24亿韩元,将选择3个课题,每个课题支持8亿韩元。

AI性能评价数据集建设项目
AI性能评价数据集建设项目

最近,生成型人工智能服务在全球范围内迅速普及,但性能评价的标准主要以英语国家为中心。因此对于国内使用环境或社会特性并未能充分反映,遭到批评。

因此,科学技术信息通信部反映国内外专家意见,建立了作为评价标准的数据集领域。今年的建设对象包括:评估数学解题能力的数据集(数学领域)、评估韩国知识的问答及推理数据集(知识领域)、以及基于长文语境的各种任务性能评价数据集(长文理解领域)等三类。

公募领域详细要求
公募领域详细要求

未来计划扩展为多种形式(多模态)、代理人等各种人工智能模型评价的数据集。

参与该项目的企业或机构需具备开发超大规模人工智能、自然语言处理、多模态AI等基于大规模数据的能力,并且必须以至少一个相关机构的联合体形式参与。

科学技术信息通信部人工智能基础政策官金京万表示,“只有构建反映国内环境的数据集,才能准确诊断自主AI模型的性能。为提高生态系统整体竞争力,本次项目开发的数据集将向不仅是精英团队,还会向国内AI开发机构发布。”

申请将通过数字提案书综合管理系统在线进行,咨询请联系韩国智能信息社会振兴院AI数据扩散团队。

Leave a Comment