头图

5月12日,2024 CCF国际AIOps挑战赛线下宣讲会在中国科学院计算机网络信息中心圆满召开。本次宣讲会吸引了来自行业专家和学术界的众多嘉宾参与。会上对本届挑战赛的赛题赛制做了详细的解读和分享,共同探讨了大模型技术及RAG在领域中的前沿应用与发展趋势。2024 CCF国际AIOps挑战赛由中国计算机学会(CCF)主办,中国计算机学会互联网专委会、清华大学、中国科学院计算机网络信息中心承办,中兴通讯、北京智谱华章科技有限公司、中南大学计算机学院、清华大学计算机科学与技术系、北京必示科技有限公司协办。 

图片

宣讲会伊始,中国科学院计算机网络信息中心研究员谢高岗,中国计算机学会互联网专委会秘书长、东北大学计算机科学与工程学院教授易秀双,中兴通讯无线及算力研究院算法部部长耿鹏,AIOps挑战赛的创办者、清华大学计算机系长聘副教授裴丹发表了热情洋溢的致辞,对与会者表示欢迎,同时预祝挑战赛取得圆满成功。

“AIOps结合大模型,是当前运维和人工智能领域中的热点。通过引入大模型,我们能够有更多的灵活性,解决传统运维技术难以应对的问题。特别是在RAG增强技术上的应用,它将知识检索与生成模型结合起来,不仅提高了问题解决的准度和效率,也增强了模型在多变环境下的适应能力。”

“期待通过本次比赛,能够更直观地看到检索增强技术在智能运维行业中的重要价值,更希望能够发现并解决大模型技术在行业应用中面临的挑战,实现技术上的突破和创新。”

图片

随后,宣讲会进入特邀报告环节,由中国科学院计算机网络信息中心研究员黎建辉介绍了中国科技云的发展情况,详细阐述了中国科技云在推动科研创新、支持科研计算等方面的重要作用。

图片

紧接着,本届挑战赛程序委员会主席、中国科学院计算机网络信息中心副研究员裴昶华详细介绍了2014 CCF国际AIOps挑战赛的竞赛背景、赛题及赛制,引发了与会者的广泛关注。去年AIOps挑战赛的“开放的赛题”已经激发了大家将大模型应用于智能运维领域的热情。今年,我们将进一步探索大模型技术在智能运维中的应用和落地,期待看到更加多样化和创新的解决方案。

图片

随后的环节中,中兴通讯无线及算力研究院算法部部长耿鹏分享了RAG技术在领域中的实际应用解析及案例,阿里巴巴集团阿里云百炼首席架构师高金杨、智谱AI解决方案专家冯小平、华为通信大模型技术负责人李芳明等业界专家分别就企业级大模型应用服务平台、企业大模型就绪的维度以及华为通信大模型应用实践等议题进行了深入分享。

图片

在接下来的OpenAlOps社区工作进展分享中,必示科技算法研究员、产品总监聂晓辉介绍了社区AlOps Live Benchmark的最新成果,南开大学软件学院副教授孙永谦和南开大学软件学院副教授张圣林则分别就“时空大模型闭门深度研讨会”的成果和OpenAlOps社区整体进展进行了汇报。

本届AIOps挑战赛是OpenAIOps社区成立之后的第一届重要年度赛事,社区不仅会举办每年的比赛、研讨会,还将开源和共享模型、数据,以促进知识交流和技术进步。OpenAlOps社区致力于通过开放的社区合作与群体智慧协同创新,构建AIOps开源创新技术及软件,推动AIOps生态的繁荣发展。

CCF国际AIOps挑战赛自清华大学联合中国计算机学会(CCF)共同发起以来,已经走到了第七年。每一年,我们都有所收获,参赛人数逐年增加,从最初的100个参赛队伍增长到去年的700多支队伍,社区活跃成员已经超过4000余名,AIOps挑战赛已经成为社区交流的重要活动。希望通过本次挑战赛激发领域内将大模型应用于智能运维领域的热情,为行业输送更多优秀人才,共同推动AIOps技术的创新与发展。

图片

会议直播回放请关注OpenAlOps社区视频号(视频号主页-直播回放)

图片

2024(第七届)CCF国际AIOps挑战赛报名火热进行中!
报名地址:https://aiops-challenge.com     

赛题方向

「基于检索增强的运维知识问答挑战赛」2024年第七届CCF国际AIOps挑战赛首次采用大模型检索增强(RAG)技术,基于5G领域运维技术文档,探索如何结合领域私有技术文档进行高效私域知识问答。揭示在通用大语言模型基座下,垂直领域知识问答面临的领域知识缺失,公私域知识冲突,多模态图表并存等一系列挑战。

参赛队伍需要通过私域文本处理、数据库构建、基座模型微调、Prompt工程等其中部分技术,搭建运维领域的检索增强问答系统,或基于大赛主办方搭建的基础RAG系统之上,修改部分模块,提升私域知识问答精度。大赛主办方会使用公开的私域文档相关的问题和专家标准答案对选手的答案进行评测,实时更新榜单。

本届大赛采用双赛道赛制。赛道一只能使用开源的Qwen1.5-14b模型,可以对模型微调之后再进行RAG问答。赛道二只能调用GLM4的API接口,模型不能微调,模拟在特定场景下没有自己微调模型能力的运维场景。每个选手可以自由选择赛道,也可以只参加一个赛道,最终成绩按照最好排名的赛道计算。

大赛分为初赛、复赛和决赛三个阶段。初赛每个赛道选择至少前10名,共20+比赛队伍进入复赛。复赛会根据每个赛道的排名,技术报告完整度和创新性等多个维度组织复赛专家评审会,两赛道合计筛选10支队伍进入决赛。决赛通过答辩评出最终获奖团队。       

赛程安排

   
图片

奖项设置

本届大赛奖金池总额¥140,000,两个赛道合并评分。
一等奖1名,奖金¥50,000;
二等奖2名,奖金¥30,000;
三等奖3名,奖金¥10,000。
(以上提及金额为税前金额)
     

大赛报名 

  
报名时间:2024年5月12日-6月11日报名流程:
参赛选手在官网(https://aiops-challenge.com)进行注册,按照提示填写账户资料、绑定手机号、进行实名认证,实名认证经审核通过后,即可点击“参加比赛”报名。

  • 若队伍成员为海外选手,实名认证选择“其他”,上传相应证件照片。
  • 高校学生参与报名,所在单位及职位请填写所在学校及专业年级。
  • 请如实填写信息,否则可能取消参赛资格和成绩。

创建队伍:选手报名后自动创建团队,可邀请其他成员加入,组队完成后由队长确认“确认组队完成”。

  • 参赛队伍人数不限,可以单人组队,也可以自由组队。
  • 组队确认后,无法对队伍信息做修改,请谨慎操作。
  • 每名选手限参加1支参赛队伍。

魔搭社区资源申请:选手确认组队完成后,请以团队为单位,填写资源需求表(每支队伍提交一份即可),组委会将根据需求表信息为参赛各队伍提供魔搭社区资源。每个参赛队伍最多可提交5个魔搭账号,提交的魔搭账号将在7个工作日内完成延时,延时后每个账号将有100小时供使用。

图片

扫码填写魔搭资源需求表魔搭资源需求表地址:https://wj.qq.com/s2/14445887/d084

智谱资源申请:如选手参与赛道二,请以团队为单位,填写智谱资源需求表(每支队伍提交一份即可),组委会将根据需求表信息为参赛各队伍提供智谱免费token,每个参赛队伍最多可提交5个智谱账号。

图片

扫码填写智谱资源需求表智谱资源需求表地址:https://wj.qq.com/s2/14630018/lqve/

2024 CCF国际AIOps挑战赛报名已经启动,更多赛事相关信息将在社区“智能运维前沿”公众号发布,同时OpenAIOps社区群将提供赛事通知、赛事答疑,作为学习交流的平台已吸引近4000+参与,有意者可扫码加入挑战赛8群,如果群满可添加官方微信号(OpenAIOps社区小助手)入群。

欢迎业界专业人士关注参与本届挑战赛!

图片

图片


BizSeer必示科技
7 声望5 粉丝

必示科技致力于以人工智能赋能IT运维领域,打造领先的智能运维(AIOps)引擎。提高企业IT系统可用性和运维效率,助力企业数字化转型。