跳到正文
热点事件持续更新

百度开源文心5.5 Flash Base基座模型

2 篇报道2 个报道来源6 小时前更新

先了解这件事

AI 综述

百度于11月5日开源基座模型文心5.5 Flash Base(ERNIE 5.5 Flash Base),采用MoE架构,总参数量2800亿,每个Token激活140亿参数。该模型预训练使用33.5万亿Token,预训练上下文最高128K,微调与推理阶段支持最长100万Token上下文;报道称其在多个基准上刷新同尺寸SOTA。 据The Decoder报道,此次发布的是刻意未经微调或后训练的基座版本,权重以FP8和BF16格式在Hugging Face提供,百度称后续将推出后训练版本。

AI 根据报道生成 · 5 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. The Decoder
    百度开源 2800 亿参数 ERNIE 5.5 Flash Base 基础模型

    百度发布开源基础模型 ERNIE-5.5-Flash-Base,采用 MoE 架构,总参数 2800 亿、每次输入激活 140 亿,刻意不做微调或后训练,后续将推出后训练版本。

11月5日
  1. 雷峰网 · AI
    百度开源文心5.5 Flash Base基座模型,多基准刷新同尺寸SOTA

    百度于11月5日正式开源基座模型文心5.5 Flash Base(ERNIE 5.5 Flash Base),采用MoE架构,总参数量2800亿,每个Token激活140亿参数,预训练使用33.5万亿Token,预训练上下文最高128K,微调与推理阶段支持最长100万Token上下文。

本事件热度走势

可比范围当前
15
可比范围峰值
1711月6日 02:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。