跳到主要内容
检索

# LFM3-Omni-2B

2 篇关联报道

订阅更新
  1. Hugging Face - Blog

    Liquid AI 把六种模态压进 2B 参数:文本模型 4 比特约 1 GB,单卡即可微调

    Liquid AI 发布 LFM3 系列,把文本、视觉、音频、全模态和决策模型统一到同一个 2B 级骨干上,全部开放权重并可在单张 GPU 上微调。相比上一代 LFM2 家族,LFM3-1.7B 以少 35% 的参数超过 LFM2.5-2.6B,在 WebArena-Verified 上得 38.42,而后者为 3.02。文本模型 4 比特精度下约 1 GB,支持 256K 上下文,面向端侧智能体部署。

  2. Liquid AI

    Liquid AI 把文本、视觉、音频和决策模型压进同一套2B骨干,长上下文下比LFM2快约25%

    Liquid AI 发布 LFM3 系列,把文本、视觉、音频、全模态和决策模型统一到一套约2B参数的共享骨干上,基座与后训练权重以开放权重形式在 Hugging Face 和其 API 上线。新骨干由门控短卷积、滑动窗口注意力和全局注意力混合而成,预训练使用22T token,末段3.5T token 的中训练把上下文扩展到256K。按参数计,LFM3-1.7B 在边缘设备短提示上追平 LFM2-1.2B,在8K token 上下文下约快25%。

已读完全部报道