LG推出韩国首个开源AI模型EXAONE

来源:网界网 | 2024-08-13 09:44:18

  LG集团AI Research 宣布推出韩国首个开源 AI 模型 EXAONE 3.0。它使韩国进入了由美国科技巨头和中国和中东新兴公司主导的全球人工智能领域。值得注意的是,它目前仅支持两种语言——英语和韩语。

  EXAONE 3.0 是一个开源模型,据报道它基于仅解码器的 Transformer 架构。它拥有 7.8B 参数和 8T 的训练数据(令牌)。

  LG的一份新闻稿称:“在为各种目的构建的EXAONE 3.0语言模型阵容中,7.8B指令调整模型正在提前开源,以便用于研究。该公司希望该模型的发布能够帮助国内外的AI研究人员进行更有意义的研究,并帮助AI生态系统向前迈进一步。

  根据该公司的测试,该模型的英语能力已达到“世界顶级水平”。据报道,真实用例的平均得分排名第一,超过了 Llama 3.0 等许多模型。

  在数学计算和编码方面,EXAONE 3.0的平均分也排名第一,推理能力强。

  更不用说,EXAONE 3.0在韩国的实际用例和单一基准测试的平均得分中都排名第一。据称,与上一代模型相比,该模型可减少 56% 的推理时间、35% 的内存使用量和 72% 的运营成本。

  据报道,最新的模型已经在与专利、代码、数学和化学相关的6000万例专业数据上进行了训练。该公司计划到今年年底将各个领域的训练数据扩展到1亿例。

  为了降低操作AI模型的功耗,LG AI Research专注于研究优化技术和使模型轻量化,与EXAONE 1.0相比,他们成功地将模型的大小减小了97%,同时提高了性能。

相关阅读

每日精选