卡饭网 > 科技 > 人工智能 > 正文

B 站首次公布 AI 自研大语言模型

来源:卡饭网 作者:夜夜 时间:2024-07-05 16:14:14

卡饭网 7 月 5 日消息,2024 世界人工智能大会(WAIC 2024)上,B站首次公布多项自研AI技术与AIGC创意,涵盖AI语音声库、必剪Studio和AI动态漫技术。B站大语言模型系列也首次亮相,包括开源的Index-1.9B chat和Index-1.9B character。

B 站首次公布 AI 自研大语言模型

Index-1.9B 系列模型于 6 月开源,包含基座模型、对照组、对话模型、角色扮演模型:

Index-1.9B base : 基座模型,具有 19 亿非词嵌入参数量,在 2.8T 中英文为主的语料上预训练,多个评测基准上与同级别模型比处于领先

Index-1.9B pure : 基座模型的对照组,与 base 具有相同的参数和训练策略,不同之处在于过滤了该版本语料中所有指令相关的数据,以此来验证指令对 benchmark 的影响

Index-1.9B chat : 基于 index-1.9B base 通过 SFT 和 DPO 对齐后的对话模型

Index-1.9B character : 在 SFT 和 DPO 的基础上引入了 RAG 来实现 fewshots 角色扮演定制

B 站首次公布 AI 自研大语言模型

Index-1.9B 系列模型开源地址:

https://github.com/bilibili/Index-1.9B

B 站首次公布 AI 自研大语言模型

相关推荐

  • 网易《永劫无间》手游今日公测

    卡饭网 7 月 25 日消息,网易旗下高人气作品《永劫无间》手游今日正式公测开服,开服时间为上午10点,并已同步开放iOS、安卓及PC模拟器端的下载和游玩。

    游戏 网易 2024-07-25
  • Govee 推出《EVA》联名版游戏照明产品

    卡饭网 7 月 25 日消息,在今日的发布中,知名智能照明品牌 Govee 宣布与经典动画《新世纪福音战士》(简称《EVA》)展开联名合作,推出了一系列初号机配色的游戏照明产品。

    2024-07-25
  • 《头脑特工队 2》成为全球票房最高动画电影

    卡饭网 7 月 25 日消息,《头脑特工队 2》成功超越《冰雪奇缘 2》,刷新了动画电影票房的历史记录,成为有史以来全球票房最高的动画电影。该影片的全球票房收入现已突破14.62亿美元(约合106.31亿元人民币)。

    2024-07-25
  • 索尼公开 PlayStation 中国之星计划第三期游戏

    卡饭网 7 月 25 日消息,索尼今日公布了PlayStation中国之星计划第三期的三款精选作品,这些作品分别是织命旅途工作室的《绝晓》、凉屋游戏的《楼兰》以及成都苍墨科技的《代号:锦衣卫》。

    索尼 游戏 PS5 2024-07-25
  • 上半年国内游戏市场收入超 1472 亿元

    卡饭网 7 月 25 日消息,据中国游戏工委在2024ChinaJoy高峰论坛现场公布的最新数据显示,今年上半年,国内游戏市场实际销售收入达到1472.67亿元,同比增长2.08%。

    游戏 2024-07-25