关于召开大模型评测基准第二次研讨会的通知 | OpenLLMsBenchmark委员会

添加书签

专注AIGC领域的专业社区,关注GPT-4、百度文心一言、华为盘古等大语言模型(LLM)的发展和应用落地,以及国内LLM的发展和市场研究,欢迎关注!

大模型、生成式AI以及ChatGPT等引发的人工智能热潮,正在驱动市场参与者加速新一代AI的研发,也驱动行业企业开始引入新的应用。诸多行业企业已经看到大模型可能为企业带来的竞争优势,纷纷宣布研发或者尝试引入大模型赋能业务创新发展。

为了进一步推动大模型产业生态的健康发展,促进技术的创新应用与多元实践,AIGC开放社区联合大模型厂商、服务商、开源社区、应用方等共同成立一个独立的第三方、非营利性组织:Open LLMs Benchmark开放大模型基准委员会,并成功组织了第一次大模型评测基准研讨会,近60家单位80余名专家报名参与。

目前,Open LLMs Benchmark委员会已根据研讨会上征集的意见和建议修订了大模型基准框架,并初步完成了基准初稿的编制。为进一步完善基准详细指标,Open LLMs Benchmark委员会拟组织召开大模型评测基准第二次研讨会,现诚挚邀请各相关单位及专家参会。

一、 研讨内容 
1、大模型评测基准框架修订说明
2、大模型评测准初稿说明
2、启动分组编撰任务,丰富基准详细内容
二、 会议时间 
2023年5月31日(周三)16:00-18:00
三、参会方式
本次研讨会使用“腾讯会议”,远程视频会议形式召开,点击链接报名入会:
https://meeting.tencent.com/dm/2wVNrmYgKnbX
#腾讯会议:846-5739-3924
会议密码:请通过委员会申请报名获取
四、联系人 
郭政纲 
13260410653 
nero@aigcopen.com 
陈  龙 
13226611521 
chenlong@aigcopen.com
五、关于Open LLMs Benchmark委员会
随着近年来人工智能技术的飞速发展,尤其是深度学习领域的突破,大型语言模型(LLMs)已经成为了研究和应用的热点。这些模型在自然语言处理、机器翻译等领域取得了显著的成果。然而,随着模型规模的不断扩大,如何对这些大模型进行有效、公平、可靠的评测,已经成为了业界关注的重要问题。
为了解决这一问题,AIGC开放社区联合大模型厂商、服务商、开源社区、应用方等共同成立一个独立的第三方、非营利性组织:Open LLMs Benchmark开放大模型评测基准委员会,旨在构建一个公开、透明、可靠的大模型评测基准,为全球相关研究者、开发者和企业提供参考。
点击阅读原文,或者扫描下方二维码提交申请加入委员会:

END