跳到主要内容
返回时间线
Baseten来源发表:

Baseten推出环境网络:把强化学习环境外包给审核过的团队,训练和推理仍留在自己手里

核心概要

Baseten推出环境网络,把为后训练构建强化学习环境的工作交给一批经过审核的合作伙伴公司。此前这类环境由Baseten自己的应用研究团队在Harvey、Lovable、Gamma等后训练项目中手工搭建,费时且依赖研究者的判断。合作方直接接触客户、用客户的真实数据构建环境,Baseten负责训练与推理部署;Baseten还计划开源一批前沿质量的环境及审核与训练方法。

Source-provided article image: Introducing the Baseten Environment Network
Baseten

深度剖析

Baseten推出环境网络,由一批经过审核的强化学习环境公司为客户定制构建后训练所需的环境。 此前每个后训练项目所需的环境都由Baseten自己的团队手工搭建,公司称这项工作需要细心的研究者、良好的判断和大量查看数据的时间。 Baseten称已在Harvey、Lovable、Gamma等后训练项目中自行完成环境构建,并称与大量环境公司接触、审核后做了严格筛选。

合作方直接与客户对接,取用客户的真实数据,构建客户需要的具体环境。 合作方按项目需要还可能负责创建任务、审核任务、编写评分标准,以及提供在环境中产出数据所需的资源。 Baseten表示推荐标准首先是信任对方的流程、并能把该流程对应到客户需求上,领域经验并非首要标准。

环境就绪后,训练与推理仍由Baseten完成,模型部署在Baseten的生产推理上。 Baseten称客户通常自带数据来播种环境,而不必依赖合成生成。 Baseten称客户只关心一个环境,因此为其搭建把数据和反馈转成环境的可扩展系统值得前期投入,且可长期使用。

启示与展望

报道范围限于Baseten公布的环境网络构成、合作流程与开源计划;文中未给出任何环境质量指标、训练效果数字或合作方名单,读者应把它当作一项服务与生态安排来读。

Baseten称将开源一批前沿质量的环境及审核和训练方法,但未给出时间表;这些环境被寄望用于研究、标准化评估和作为反映公开基准之外信息的现实智能指数,目前仍是计划。