arXiv cs.AI 发布于 08/31 12:00

Time Capsule of Testable Human Knowledge: 41 Years of Jeopardy! in a Single Free Local Model

(翻译)可检验人类知识的时间胶囊:单一免费本地模型中的41年Jeopardy!

查看原文

资讯摘要

Abstract page for arXiv paper 2608.27459: Time Capsule of Testable Human Knowledge: 41 Years of Jeopardy! in a Single Free Local Model

AI 摘要

论文评估了一个9GB开源模型(Qwen2.5-14B 4bit)在529,939条Jeopardy!题目上的表现,涵盖1984至2025年全部41季。模型在严格强制回答协议下准确率为67%,事实类题目超过85%;在训练截止后播出的题目上保持65%,而IBM Watson为0。研究认为知识快照已可便携且几乎免费。

AI 问答

该模型在多少条Jeopardy!题目上进行了测试?

529,939条,覆盖1984至2025年全部41季。

在训练截止后播出的题目上,本地模型的准确率是多少?

65%,而Claude Opus 4.8为95%,Watson为0。

论文使用的模型具体是什么?

Qwen2.5-14B的4-bit量化版本,约9GB。

打开原文

更多资讯

算力、机器人、仿真与资本,谁在定义物理AI下一个十年?|第十届全球ICT峰会回顾36氪 · 09/15 17:47OpenAI故意欠技术债,等Codex来还:仅2名工程师,把核心存储从Python重写成RustInfoQ 中文 · 09/16 00:09SDL3 移植到 HarmonyOS / OpenHarmonySolidot · 09/16 16:57具透 | 精心优化, 体验感愉悦升华:iOS 27 中值得关注的新特性少数派 · 09/15 15:00YC 最值钱的这 20家公司,没有一家来自最近5年人人都是产品经理 · 09/15 10:39Xspark AI 丁文伯:触觉替代不了视觉,但机器人需要一套自己的“脊髓” |物理AI 50人雷峰网 · 09/15 15:52超级智能体“迪迪虾”上车,比亚迪携手阿里云推进智能座舱升级雷峰网 · 09/15 11:58电商对账的设计逻辑:四层核对,逐层下钻人人都是产品经理 · 09/16 14:36字节跳动CEO梁汝波:豆包、飞书与火山引擎整合后 将加大企业市场投入雷峰网 · 09/15 11:45被用了几千年的铜,怎么突然成了AI时代的新宠?果壳网 · 09/16 16:1536氪首发 | 国内头部硅电容IDM企业融资亿元,切入AI芯片与高端光模块36氪 · 09/16 14:35英伟达开始限制Claude使用了金色财经 · 09/15 12:37圆桌:CVC的全面崛起 | 36氪 2026产业未来大会36氪 · 09/15 16:59以太坊 2026 年第二季度报告金色财经 · 09/15 17:06当罗永浩站在群众的对立面人人都是产品经理 · 09/15 11:35Introducing Gemini 3.8 Live and 3.8 Live Extended ThinkingGoogle DeepMind Blog · 09/16 01:05Opus 5.2深夜上线 RSI真来了?金色财经 · 09/15 11:43AI 写了几十页 PPT,“经营分析”报告仍被批不够深入?人人都是产品经理 · 09/15 11:32一边喊停一边敲钟:硅谷AI巨头到底在怕什么金色财经 · 09/16 10:53华为坤灵升级“4+10+N”场景化方案,发布“经纬计划”和50个样板点雷峰网 · 09/16 17:27被英伟达点名的杭州团队,补上了AI for Science的「最后一公里」量子位 · 09/16 11:40华为GTS让Agent学会「看着网络排障」,双防火墙难题几乎全拿下量子位 · 09/16 10:27圆桌:落地·量子计算的场景涌现——如果量子算力明天就可用,谁会第一个买单 | 36氪 2026产业未来大会36氪 · 09/15 18:08企业案例分享:坤煜量子|36氪2026产业未来大会36氪 · 09/15 16:54我和我的 AI 手机吃了 3 顿饭爱范儿 / APPSO · 09/16 12:04CLARITY的失败 跟加密行业好坏没啥关系金色财经 · 09/16 14:11具透 | Liquid Glass 设计改进、性能提升……iPadOS 27 中值得一瞥的新特性少数派 · 09/16 15:00大促GMV猛涨500%:激光雕刻设备靠"创意落地"出海东南亚雷峰网 · 09/16 15:57Cloudflare将每天90亿次请求的JavaScript CDN迁移到其开发者平台InfoQ 中文 · 09/16 17:10Announcing instance preference lists for Amazon SageMaker AI training jobsAWS Machine Learning Blog · 09/16 00:01