为贯彻落实国家关于加快招标投标领域人工智能推广应用的有关部署,推动人工智能技术在招标采购领域规范、有效、可信落地,中国信息通信研究院正联合有关单位,围绕招标采购领域人工智能应用能力评价,推进标准共研、试点验证和评估服务工作。
前期,中国信息通信研究院信息化与工业化融合研究所已初步建立面向智能招采应用的能力评价模型和测试评价方法。本项工作拟通过团体标准、行业标准等多种路径,邀请相关单位共同完善评价模型、共研标准草案、推进标准立项申报,并同步开展典型场景试点验证和第三方评估服务。现面向公共资源交易平台、央国企采购单位、电子招投标平台、招标代理机构、人工智能技术企业及相关科研机构,征集标准共研、试点验证和评估服务需求单位。
一、工作背景
近年来,大模型、多模态识别、知识图谱、规则引擎、智能体等人工智能技术加快进入招标采购领域,在文件智能审查、辅助评审、异常风险识别、交易监管、咨询问答、投诉处理等环节形成了较多应用探索。但从实践看,当前智能招采应用仍存在能力边界不清、应用成效难评价、测试方法不统一、项目验收缺依据、安全合规要求不明确等问题,亟需建立面向真实业务场景的能力评价和测试验证体系,凝聚行业共识,推动相关应用从局部探索走向可用、可测、可评、可信。
中国信息通信研究院信息化与工业化融合研究所前期已围绕智能招采技术路径研究和应用能力评测开展多项实践工作,初步形成了能力评价模型和测试评价方法。下一步,将通过标准共研、试点验证和评估服务协同推进,以典型场景、真实系统和专家基准验证评价模型、完善测试方法,推动形成可推广的标准化成果。
二、工作内容
本次工作将围绕招标采购领域人工智能应用能力评价,推动标准共研、试点验证和评估服务同步开展、相互支撑,重点包括:
･(一)推进标准共研。围绕智能招采应用的能力要求、等级评价、测试方法、结果表达等内容,邀请相关单位共同完善能力评价模型、共研标准草案,推动标准立项申报和成果转化。
･(二)开展试点验证。面向已建、在建或拟建的智能招采系统、平台、模块和解决方案,选取典型业务场景开展试点验证,为标准研究和成果转化提供实践依据。
･(三)提供评估服务。围绕智能招采应用的通用能力、典型场景能力、安全合规能力等开展第三方评估,为系统选型、试点上线、项目验收和优化升级提供参考依据。
･(四)是推动成果应用。汇聚共研单位、试点验证单位和评估服务需求单位的实践经验,形成评价模型、标准指引、典型案例等成果,推动评价体系持续完善和推广应用。
三、评估服务方向
评估服务不限定具体技术路线和系统形态,可面向智能招采相关产品、平台、模块或解决方案开展,重点包括:
･(一)系统能力评估。评估系统在特定业务场景下的能力边界、任务完成质量、输出可靠性和应用适配性,形成系统能力画像和分项评价结论。
･(二)场景应用验证。基于具体业务流程和脱敏样本,对系统在实际应用中的任务完成情况、结果可复核性和适用边界进行验证,并将验证结果反向支撑标准指标和评价方法完善。
･(三)项目验收支撑。为智能招采系统建设、试点上线、阶段验收和优化升级提供测试方案、测试记录、问题清单、能力评估报告和整改建议。
･(四)能力提升咨询。针对评估中发现的问题,围绕数据治理、知识库建设、规则库构建、模型优化、流程嵌入、安全合规和人机协同机制提出优化建议。
四、征集对象
现面向以下单位征集参与:
(一)公共资源交易平台、电子招投标平台、电子采购平台;
(二)中央企业、地方国有企业、大型集团采购单位;
(三)招标代理机构、采购代理机构;
(四)人工智能技术企业、智能招采产品和解决方案提供商;
(五)行业协会、科研院所、高校及相关专家;
(六)有智能招采系统建设、应用验证、项目验收或能力评估需求的单位。
五、参与方式
有关单位可根据自身情况选择以下方式参与:
(一)作为标准共研单位,参与能力评价模型完善和标准草案研究;
(二)作为试点验证单位,提供典型应用场景、业务规则、系统案例和脱敏样本;
(三)作为评估服务需求单位,申请开展已建、在建或拟建系统的第三方能力评估;
(四)参与测试数据、专家基准和测评方法研究;
(五)共同推动标准立项申报、试点验证和成果推广。
欢迎各有关单位积极参与,共同推动招标采购领域人工智能应用标准化、规范化、可信化发展。
如有意向参与,请关注微信公众号 “信息化与工业化融合研究所” 获取报名通道及后续通知。
