Мы представляем EVAL Engine (Архитектура оценки и валидации), децентрализованную платформу для оценки ИИ-агентов с акцентом на крипто-нативных агентов через проверяемые оценки в реальном времени и возможности непрерывного обучения.
Наша система использует безгазовую реляционную блокчейн-архитектуру Chromia, чтобы обеспечить прозрачную, неизменяемую и экономически эффективную оценку производительности ИИ-агентов. Система включает несколько LLM-as-a-judge[1] и метрики социального взаимодействия для непрерывного обучения с подкреплением через цикл обратной связи и систему вознаграждений.
Мы демонстрируем, что EVAL Engine может обеспечить эффективные и безопасные оценки, адаптируясь к меняющимся стандартам производительности через циклы обратной связи, ориентированные на взаимодействие.
Мы также представляем комплексный план разработки EVAL Engine, включая разработку API, подготовку данных, разработку моделей и развертывание моделей.