Meta ha lanzado recientemente Code Llama 70B, la última actualización del código abierto de la compañía inteligencia artificial (IA) modelo de codificación. Al anunciar el lanzamiento, el conglomerado tecnológico con sede en California lo llamó «el modelo más grande y de mejor rendimiento de la familia Code Llama». Según el informe de la compañía, Code Llama 70B obtuvo una precisión del 53 por ciento en el punto de referencia HumanEval, destacando capacidades cercanas OpenAI GPT 4 que obtuvo una puntuación del 67 por ciento. El último asistente de IA se une a los modelos de codificación existentes Code Llama 7B, Code Llama 13B y Code Llama 34B.
Mark Zuckerberg, director ejecutivo de Meta Anunciado Code Llama 70B a través de una publicación de Facebook y dijo: “Estamos abiertos a obtener un Code Llama nuevo y mejorado, incluido un modelo de parámetro 70B más grande. Escribir y editar código se ha convertido en uno de los usos más importantes de los modelos de IA en la actualidad. [..] Estoy orgulloso del progreso aquí y espero incluir estos avances en Llama 3 y también en modelos futuros”.
Code Llama 70B está disponible en tres versiones: el modelo fundamental, Code Llama – Python y Code Llama – Instruct, según el blog de Meta. correo. Python es para el lenguaje de programación específico e Instruct tiene capacidades de procesamiento de lenguaje natural (LNP), lo que significa que puede usarlo incluso si no sabe codificar.
El asistente de codificación Meta AI es capaz de generar tanto códigos como respuestas en lenguaje natural, siendo estas últimas importantes para explicar códigos y responder consultas relacionadas con ellos. El modelo 70B se ha entrenado con 1 billón de tokens (aproximadamente 750 millones de palabras) de codificación y datos relacionados con el código. Como todos los modelos de LLama AI, Code Llama 70B también es gratuito para fines comerciales y de investigación. Es alojado en Hugging Face, un repositorio de codificación.
En cuanto a los puntos de referencia, la compañía publicó sus puntuaciones en precisión y las comparó con todos los modelos de IA rivales centrados en codificación. En el punto de referencia HumanEval, 70B obtuvo una puntuación del 53 por ciento y en el punto de referencia de programación Python mayoritariamente básica (MBPP), recibió un 62,4 por ciento. En ambos puntos de referencia, superó a GPT 3.5 de OpenAI, que recibió el 48,1 por ciento y el 52,2 por ciento, respectivamente. GPT 4 al corriente solo sus puntuaciones de precisión HumanEval en línea obtuvieron un 67 por ciento, superando el parámetro Llama Code 70B por un margen bastante saludable.
En agosto de 2023, Meta lanzó Code Llama, que se basó en el modelo fundamental de Llama 2 y se entrenó específicamente en sus conjuntos de datos basados en codificación. Acepta códigos y lenguaje natural para indicaciones y también puede generar respuestas en ambos. Code Llama puede generar, editar, analizar y depurar códigos. Su versión Instruct también puede ayudar a los usuarios a comprender los códigos en lenguaje natural.