IBM近日发布了其开源语言模型Granite的3.1版本，此版本在架构和性能方面都有显著提升。相比之前的版本，Granite 3.1在处理文本和代码方面能力更强，可以一次处理多达128,000个令牌，并支持12种语言和116种编程语言。 该模型在信息提取、文档摘要和基于外部数据问答等任务上表现出色，为开发者提供了更强大的工具，助力各种应用场景。
近日，IBM 宣布推出其开源语言模型 Granite 的3.1版本，此次更新带来了诸多重要改进。新版本的模型经过重新设计，采用了更加密集的架构，能够一次处理多达128，000个令牌。这一更新意味着 Granite 在处理复杂文本和任务时的能力得到了显著增强。
Granite3.1版本的模型经过了12种语言和116种编程语言的数据集训练，总共处理了12万亿个令牌。这使得模型在语言理解和生成方面的表现更加出色，能够更好地满足用户的需求。IBM 表示，这些新模型在回答使用外部数据的问题（RAG）、从非结构化文本中提取信息以及创建文档摘要等任务中表现尤为突出。
开发者现在可以通过 Hugging Face 平台访问这些模型，为各种应用场景提供强大的支持。Granite 最初于2024年5月首次推出，此次更新标志着 IBM 在开源人工智能领域的持续进步和创新。
IBM 的 Granite 模型不仅仅是技术的提升，更是为开发者和企业提供了更灵活、更强大的工具，使他们能够更高效地处理和分析数据。随着人工智能技术的不断发展，Granite 模型将继续发挥其重要作用，帮助各行业实现数字化转型。
通过这一系列的改进，IBM 希望能够吸引更多的开发者参与到开源社区中，共同推动人工智能技术的发展。Granite3.1的发布不仅是技术上的一次飞跃，更是对未来语言模型研究的积极推动。
项目入口：https://huggingface.co/collections/ibm-granite/granite-31-language-models-6751dbbf2f3389bec5c6f02d
划重点:
新版 Granite3.1模型经过重新设计，能处理最多128，000个令牌。
模型训练数据涵盖12种语言和116种编程语言，总计处理12万亿个令牌。
开发者可通过 Hugging Face 平台访问这些强大的开源语言模型。
Granite 3.1版本的推出，展现了IBM在开源人工智能领域的持续投入和技术实力。其强大的性能和广泛的语言支持，将为全球开发者和企业提供更便捷、更强大的AI工具，促进人工智能技术的进步和应用。期待未来Granite模型能够带来更多创新和突破。