Meta revela assistente de codificação de IA de código aberto com parâmetros 70B, Code Llama, superando GPT-3.5 no benchmark HumanEval. Meta unveils 70B-parameter open-source AI coding assistant, Code Llama, outperforming GPT-3.5 on HumanEval benchmark.

Meta lançou uma versão atualizada de seu modelo de geração de código AI, Code Llama 70B. Meta has released an updated version of its AI code generation model, Code Llama 70B. O modelo, que pode escrever código em diversas linguagens de programação, é considerado o maior e de melhor desempenho da família Code Llama. The model, which can write code in various programming languages, is considered the largest and best-performing model in the Code Llama family. Ele pode lidar com mais consultas do que as versões anteriores e possui uma precisão de 53% no benchmark HumanEval, superando os 48,1% do GPT-3.5 e chegando mais perto dos 67% do GPT-4. It can handle more queries than previous versions and boasts an accuracy of 53% on the HumanEval benchmark, surpassing GPT-3.5's 48.1% and coming closer to GPT-4's 67%.

January 30, 2024

7 Artigos