
近日,IBM发布了四款全新的 Granite4.0Nano 模型,参数范围覆盖350万至15亿。与当前主流大模型普遍依赖云端算力不同,这一系列模型具备极强的本地运行能力,可在普通笔记本电脑甚至浏览器环境中直接部署,为开发者在消费者级设备或边缘计算场景下构建AI应用提供了全新可能。
所有 Granite4.0Nano 模型均采用 Apache 2.0 许可协议开源,允许研究人员、企业及独立开发者自由使用,并支持商业化应用。这些模型兼容多种主流推理框架,包括 llama.cpp、vLLM 和 MLX,同时已通过 ISO/IEC 42001 负责任 AI 认证,确保开发过程符合伦理与安全标准。
该系列包含四个成员:Granite-4.0-H-1B(约1.5亿参数)、Granite-4.0-H-350M(约350万参数)、Granite-4.0-1B(接近2亿参数的版本)以及 Granite-4.0-350M(另一350万参数变体)。其中,H 系列基于混合状态空间架构设计,专为低延迟边缘应用场景优化;标准版则采用传统变压器结构,在兼容性方面更具优势。
测试数据显示,Granite4.0系列在多项基准评估中超越同级别竞品,尤其在指令理解与函数调用任务中表现优异。IBM研究团队指出,这些模型不仅对内存占用进行了高效优化,还显著提升了推理速度,能够在移动终端或纯CPU环境下实现流畅运行。
以上就是IBM 发布 Granite 4.0 Nano 模型的详细内容,更多请关注php中文网其它相关文章!
每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。
Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号