Hugging Face Blog 发布于 08/25 23:14

Granite 4.2 LLMs: How They're Built

(翻译)Granite 4.2 大语言模型:它们是如何构建的

查看原文

资讯摘要

A Blog post by IBM Granite on Hugging Face

AI 摘要

IBM 发布 Granite 4.2 系列稠密解码器专用推理大模型,提供 3B、8B、30B 三种规模,基于约 15T token 从头预训练,支持 512K 上下文。模型支持思考/非思考切换、低功耗模式和原生工具调用,8B/30B 进一步通过多阶段强化学习训练智能体能力,并以 Apache 2.0 开源。

AI 问答

Granite 4.2 有哪些模型尺寸?

Granite 4.2 提供 3B、8B 和 30B 三种稠密模型尺寸。

Granite 4.2 支持多长的上下文窗口?

通过五阶段预训练策略,上下文窗口扩展至 512K tokens。

Granite 4.2 的强化学习训练使用了什么算法?

采用异步 GRPO(组相对策略优化),并包含多阶段多环境训练流水线。

打开原文

更多资讯

Announcing instance preference lists for Amazon SageMaker AI training jobsAWS Machine Learning Blog · 09/16 00:01“裁判”不想给阿莫迪吹暂停金色财经 · 09/15 13:077名博士生仅用3个月从零训练7B大模型:代码+数据+训练日志全公开量子位 · 09/15 10:17关于项目交付的思考:部署是最后两公里,验收才是最后一公里人人都是产品经理 · 09/16 09:54Meta新研究:字节模型蒸馏后,天花板破了量子位 · 09/15 14:37Your Agent Aced the Task. Will It Do It Again?Hugging Face Blog · 09/16 00:00场景越多 ≠ 产品越好,:从抽象价值到真实生活的定义结构人人都是产品经理 · 09/15 11:58云岫资本合伙人宋旭文:量子计算:工程化与产业化并进,拐点将至 | 36氪 2026产业未来大会36氪 · 09/15 18:38当我怀念旧版 Edge 浏览器时,我在怀念什么?少数派 · 09/16 10:38月下载暴增366%,上海真人社交公司切入东南亚AI陪伴,AI角色也能“奔现”人人都是产品经理 · 09/16 14:44圆桌:探路·产业分工的新图谱,看到新未来——国家力量如何转化为产业价值 | 36氪 2026产业未来大会36氪 · 09/15 17:39一边喊停一边敲钟:硅谷AI巨头到底在怕什么金色财经 · 09/16 10:53Denuvo 起诉黑客违反 DMCA 反规避条款Solidot · 09/16 23:27谁在给我们制造 AI 焦虑金色财经 · 09/15 20:38Build a serverless PII redaction pipeline with Amazon Bedrock Data AutomationAWS Machine Learning Blog · 09/16 23:17被英伟达点名的杭州团队,补上了AI for Science的「最后一公里」量子位 · 09/16 11:40亚太唯一!腾讯云首次入选IDC MarketScape 全球托管边缘服务领导者类别雷峰网 · 09/15 17:24英伟达开始限制Claude使用了金色财经 · 09/15 12:37Mistral 与 Mozilla 合作推出 Firefox Smart WindowSolidot · 09/16 18:53一款在浏览器里运行、部署在自己服务器上的 SQL 客户端Solidot · 09/15 16:43圆桌:跃迁·AI深流,价值跃升——AI深水时代,从模型竞逐到产业价值涌现 | 36氪 2026产业未来大会36氪 · 09/15 17:239月21日,深圳前海!聊聊工业AI与生态共创的下一步量子位 · 09/15 13:20OpenAI 发布适用于编程和计算机应用的 GPT-6 AstraInfoQ 中文 · 09/16 00:52AI 写了几十页 PPT,“经营分析”报告仍被批不够深入?人人都是产品经理 · 09/15 11:32华为坤灵升级“4+10+N”场景化方案,发布“经纬计划”和50个样板点雷峰网 · 09/16 17:27“极端”空头压境 美联储周三不加息就是最大意外金色财经 · 09/16 08:22豆包工作打出“团队Agent”牌,Workbuddy、千问会跟吗?人人都是产品经理 · 09/16 14:31字节跳动CEO梁汝波:豆包、飞书与火山引擎整合后 将加大企业市场投入雷峰网 · 09/15 11:45HYROX比赛腹泻这事,运动员拼归拼,但主办方不能装看不见果壳网 · 09/16 23:15手机替我跑了一整套流程!我就说了一句话,AI执行了100步量子位 · 09/15 20:47