Laya

Jev 的开源挑战者——同样走「System 1 决策模型」路线(不生成文字、只做判断),但完全开源免费,速度更快,还有一个「先来后到」的公案。

基本信息表

项目内容
是什么开源的 System 1 决策模型家族:单次前向传播回答结构化问题(是/否、选择、评分),约 33 毫秒出结果,不生成任何文字
作者Nandakishor Mukkunnoth(Convai Innovations 创始人),一个人从 2025 年 3 月起独立研发
许可Apache 2.0——权重、代码、数据集、论文全公开
安装pip install laya,或 HuggingFace Space 网页直接试
发布2026-09(与 Jev 同月,直接对标)

公案:先来后到之争

  • 2025-03:作者发表 SalesRLAgent 论文(强化学习做决策预测)+ 权重 + 数据集
  • 2025-09:第二篇论文(置信度感知路由)
  • 2026-09:TypeSafe AI(ChatGPT 联合发明人 Diogo Almeida 创办)发布 Jev——同样的非自回归决策概念,被包装成「全新突破」,闭源计费 API($0.042/百万输入)
  • 作者公开喊话:这概念我一年前就公开做了;随后重写架构,直接与 Jev 对标基准并开源

技术要点

  • 三个检查点 + 一个路由器:laya(英文,421M)/ laya-multilingual(100+ 语言,322M)/ laya-typed-decisions(微调版,421M——发票、客服、安全告警)
  • 三种决策原语:choice(选择+概率分布)/ score(评分)/ noul(校准过的 P(true))
  • 输出纯概率和数字,结构上不可能出现格式错误(没有自由文本可乱写)

与 Jev 对标(Laya 方公布,Jev 数据来自第三方,方向性参考)

指标Jev 1.13.0Laya差距
typed-decisions 准确率0.7270.766+3.9 分
延迟(单问)236-276ms32.8ms快 7.8 倍
延迟(批量 10 问)~1500ms72ms快约 20 倍
置信度校准误差(越低越好)0.2460.081好 3 倍
价格$0.042/百万(计费 API)$0(自托管)免费
Banking77(77 类分类)0.8700.425Jev 领先(Laya 诚实局限)

最有意思的发现:英文模型会「自信地错」

51 语言测试中,英文版模型对非拉丁文字完全失效但不报错:高棉语准确率 0.000、平均置信度却高达 0.952。所以 Laya 用一个 <1ms 的路由器先检测文字系统(22 种字母表),再分发到对应检查点——置信度门控救不了场,路由必须在前向计算之前做。

在哪可以用

  1. Python:pip install laya——装完 import laya 就能跑(英文模型约 808MB,多语言 647MB)
  2. Hugging Face:模型页 convaiinnovations/laya(三个检查点都在),另有网页版 Space 可以不安装直接试玩
  3. GitHub:论文、基准测试笔记本、原始运行日志全公开

注意:它是给开发者嵌到程序里用的零件(API 是本地函数调用),不是聊天工具——想人手交互体验,走 Hugging Face Space 网页版。

诚实局限

  • Banking77 细分类任务输给 Jev
  • 基础模型本身低于「多数类基线」——能力几乎全部来自微调
  • 冷启动惩罚 7-10 秒(需常驻内存)

和我已知概念的连线

  • 与 Jev 同一物种:卡尼曼「系统一」——快速直觉判断;大语言模型是「系统二」
  • 定位一句话:开源版、更快、免费的「智能 if 语句」
  • 对我的价值层级:知道即可。它的用武之地是嵌入生产流水线的高频小判断(路由、风控、分流)——将来华润系统若要做「高置信度自动执行 / 低置信度转人工」的分流,这类模型是标准零件;日常 AI 用途上,MiniMax 包月的 OCR 大脑已覆盖

相关笔记

相关日记