跳到主要内容
检索

TypeSafe AI

5 篇关联报道

订阅更新
  1. Hugging Face - Blog

    Hugging Face把决策做成模型输出:不再逐字生成,直接给出选项概率

    Hugging Face为“决策模型”定下统一接口:输入状态与若干带类型的问题,模型直接返回选项概率、有序评分或二值概率,而不生成任何文本。此前这类结构化判断要么靠大模型输出JSON、再受约束解码兜底,要么用固定标签分类器或零样本分类。Transformers、llama.cpp与Hub标签已按同一契约接入,兼容的自回归语言模型也能在不重新训练的情况下走这套接口。

  2. Vercel News

    TypeSafe AI 的 Jev 上线 AI Gateway:决策不再逐字生成,按厂商评测最高快 193.6 倍

    TypeSafe AI 的概率决策模型 Jev 现已接入 Vercel AI Gateway,应用可把状态直接交给它,取回带类型的 Choice、Score 和 Boolean 答案及概率。常规语言模型逐词生成文本,再由应用解析校验;Jev 并行评估所有已声明问题,直接返回结构化答案。TypeSafe 报告,在其工作流评测中 Jev 比 LLM 最高快 193.6 倍、便宜 444.6 倍,可用于智能体循环中的工具选择、继续或停止判断、风险打分与输出校验。

  3. Vercel News

    决策模型不再输出自由文本:Jev 1.14 一次请求并行回答分类、打分与校验

    TypeSafe AI 的决策模型 Jev 1.14 已上线 AI Gateway。它接收状态和一组问题,返回带概率的类型化 Choice、Score 与 Boolean 答案,而不是自由文本,并在一次请求中并行回答所有问题,用于分类、路由、打分和自动校验。1.14 版把图像纳入状态输入,并提供实验性长上下文模式,处理标准请求放不下的文档、日志或对话历史。

  4. arXiv

    Jev 在 Amazon 三域重排中保持高 NDCG@10,延迟随候选集增大增长远慢于点式 Qwen

    该研究在 Amazon Reviews 2023 的 Movies and TV、Video Games、Books 三个域上,用 SASRec 检索出的高排名负例构造受控困难候选集(候选规模从 10 到 100),把被 TypeSafe AI 称为“System One Model”的决策导向模型 Jev 与 SASRec、DCNv2 以及 Qwen2.5 7B Instruct 的点式与列表式重排器对比,发现 Jev 在保持较强推荐效果(NDCG@10、Hit Rate@10、MRR)的同时,其观测服务延迟随候选集增大的增长明显比点式 Qwen 更平缓,但仍远高于推荐专用模型。

  5. arXiv

    当裁判学会说“我不确定”:决策式评判与置信度级联

    该研究把只输出判决与标签概率的决策式评判器 JEV 与十六个生成式与奖励模型评判器在偏好、事实性与答案裁定任务上对比,并配合盲法人工裁定,发现它在普通偏好与有证据支撑的事实性判断上距最强对比模型 GPT-6 不到三个百分点而费用约为其 0.36%,差距主要集中在低置信度决策上,因此一个“置信即接受、不确定即升级”的冻结级联可在更低成本下保留约 99% 的对比模型准确率。

已读完全部报道