Forklog 21 окт 2024

GPT-4o стал лидером по программированию на Solidity 🤖

BrainDAO GPT-4o Solidity OpenAI Meta

ИИ-модель GPT-4o от OpenAI заняла первое место в рейтинге по программированию на языке Solidity, превзойдя такие модели, как o1-preview и o1-mini. Исследование, проведенное BrainDAO, показало, что GPT-4o набрал впечатляющие 80,05 балла.

Для оценки модели использовали бенчмарки NaïveJudge и HumanEval, которые анализировали мастерство в создании кода смарт-контрактов. Эти бенчмарки включают строгие критерии, оценивающие реализацию ключевых функций и эффективность использования газа.

Помимо GPT-4o, в пятерку лучших вошли o1-preview и o1-mini. В исследованиях учитывались аспекты функциональности, безопасности и эффективности кода, создаваемого данными ИИ-моделями.

Ранее Meta выпустила инструмент CodeCompose для генерации кода, а Google представила обновленные версии моделей Gemini 1.5, улучшивших свои навыки в программировании.

Источник: forklog.com ↗