La dernière mise à jour de Meta pour son modèle d’IA de génération de code, Code Lama 70B, est « le modèle le plus grand et le plus performant » à ce jour. Les outils Code Llama ont été lancés en août et sont gratuits à la fois pour la recherche et pour un usage commercial. Selon un article sur le blog AI de Meta, Code Llama 70B peut gérer plus de requêtes que les versions précédentes, ce qui signifie que les développeurs peuvent lui fournir plus d’invites lors de la programmation et qu’il peut être plus précis.
Code Llama 70B a obtenu une précision de 53 % sur le benchmark HumanEval, soit une performance supérieure aux 48,1 % de GPT-3.5 et plus proche de la barre des 67 % un article OpenAI (PDF) signalé pour GPT-4.
Construit sur Llama 2, Code Llama aide les développeurs à créer des chaînes de code à partir d’invites et à déboguer le travail écrit par l’homme. Meta a lancé simultanément deux autres outils Code Llama l’automne dernier, Code Llama – Python et Code Llama – Instruct, axés sur des langages de codage spécifiques.
Code Llama 70B est disponible sur trois versions du générateur de code et est toujours gratuit pour la recherche et les utilisations commerciales. Le grand modèle a été formé sur 1 To de code et de données liées au code. Il est hébergé sur le référentiel de code Hugging Face, qui offre un accès aux GPU pour exécuter des modèles d’IA.
Meta a déclaré que ses modèles plus grands, 34B et 70B, « renvoient les meilleurs résultats et permettent une meilleure assistance au codage ».