Meta发布CodeLlama70B大模型

前沿科技
分享至
评论

  Meta于2024年1月29日发布了名为CodeLlama 70B的开源大模型。据Meta介绍,这是CodeLlama家族中规模最大、性能最优的模型版本。

Meta发布CodeLlama70B大模型

  CodeLlama 70B是基于Transformer架构构建的,拥有700亿个参数。它在一个包含1.6万亿个代码字符的数据集上进行训练。

  Meta表示,CodeLlama 70B在多项编程任务上都取得了优异的性能。例如,在HumanEval基准测试中,CodeLlama 70B在根据文档字符串补全代码的能力方面,比Llama2模型提高了10%。在MostlyBasicPythonProgramming(MBPP)基准测试中,CodeLlama 70B在根据描述编写代码的能力方面,比Llama2模型提高了20%。

  这将有助于开发人员更轻松地编写和维护代码,可以用于自动生成代码、检测代码错误和改进代码质量。

THE END

数码评测