赞
踩
智能运维领域最具影响力的专业赛事——2024(第七届)CCF国际AIOps挑战赛报名今日正式开启!
报名地址:https://aiops-challenge.com
本届挑战赛由中国计算机学会(CCF)主办,中国计算机学会互联网专委会、清华大学、中国科学院计算机网络信息中心承办,中兴通讯、北京智谱华章科技有限公司、中南大学计算机学院、清华大学计算机科学与技术系、北京必示科技有限公司协办。同时,本届AIOps挑战赛也是OpenAIOps社区成立之后第一届重要年度赛事。
「基于检索增强的运维知识问答挑战赛」
2024年第七届CCF国际AIOps挑战赛首次采用大模型检索增强(RAG)技术,基于5G领域运维技术文档,探索如何结合领域私有技术文档进行高效私域知识问答。揭示在通用大语言模型基座下,垂直领域知识问答面临的领域知识缺失,公私域知识冲突,多模态图表并存等一系列挑战。
参赛队伍需要通过私域文本处理、数据库构建、基座模型微调、Prompt工程等其中部分技术,搭建运维领域的检索增强问答系统,或基于大赛主办方搭建的基础RAG系统之上,修改部分模块,提升私域知识问答精度。大赛主办方会使用公开的私域文档相关的问题和专家标准答案对选手的答案进行评测,实时更新榜单。
本届大赛采用双赛道赛制。赛道一只能使用开源的Qwen1.5-14b模型,可以对模型微调之后再进行RAG问答。赛道二只能调用GLM4的API接口,模型不能微调,模拟在特定场景下没有自己微调模型能力的运维场景。每个选手可以自由选择赛道,也可以只参加一个赛道,最终成绩按照最好排名的赛道计算。
大赛分为初赛、复赛和决赛三个阶段。初赛每个赛道选择至少前10名,共20+比赛队伍进入复赛。复赛会根据每个赛道的排名,技术报告完整度和创新性等多个维度组织复赛专家评审会,两赛道合计筛选10支队伍进入决赛。决赛通过答辩评出最终获奖团队。
本届大赛奖金池总额¥140,000,两个赛道合并评分。
一等奖1名,奖金¥50,000;
二等奖2名,奖金¥30,000;
三等奖3名,奖金¥10,000。
(以上提及金额为税前金额)
报名时间:2024年5月12日-6月11日
报名流程:参赛选手在官网(https://aiops-challenge.com)进行注册,按照提示填写账户资料、绑定手机号、进行实名认证,实名认证经审核通过后,即可点击“参加比赛”报名。
若队伍成员为海外选手,实名认证选择“其他”,上传相应证件照片。
高校学生参与报名,所在单位及职位请填写所在学校及专业年级。
请如实填写信息,否则可能取消参赛资格和成绩。
创建队伍:选手报名后自动创建团队,可邀请其他成员加入,组队完成后由队长确认“确认组队完成”。
魔搭社区资源申请:选手确认组队完成后,请以团队为单位,填写资源需求表(每支队伍提交一份即可),组委会将根据需求表信息为参赛各队伍提供魔搭社区资源。每个参赛队伍最多可提交5个魔搭账号,提交的魔搭账号将在7个工作日内完成延时,延时后每个账号将有100小时供使用。
魔搭资源需求表地址:https://wj.qq.com/s2/14445887/d084
智谱资源申请:如选手参与赛道二,请以团队为单位,填写智谱资源需求表(每支队伍提交一份即可),组委会将根据需求表信息为参赛各队伍提供智谱免费token,每个参赛队伍最多可提交5个智谱账号。
智谱资源需求表地址:https://wj.qq.com/s2/14630018/lqve/
2024 CCF国际AIOps挑战赛报名已经启动,更多赛事相关信息将在社区“智能运维前沿”公众号发布,同时OpenAIOps社区群将提供赛事通知、赛事答疑,作为学习交流的平台已吸引近4000+参与,有意者可扫码添加官方微信号(OpenAIOps社区小助手)入群。
欢迎业界专业人士关注参与本届挑战赛!
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。