Дом
ByteDance Seed представляет тест EdgeBench, призванный пересмотреть метрики оценки эволюции агентов
В связи с быстрым развитием искусственного интеллекта оценка эффективности непрерывного обучения агентов в реальных сценариях стала ключевым направлением как для исследователей, так и для промышленности. Команда ByteDance Seed недавно представила «EdgeBench» — долгосрочный тестовый набор, предлагающий новый количественный стандарт для этой области исследований.
Основное преимущество EdgeBench заключается в акценте на обучении в реальных условиях. Он включает 134 задачи в шести областях, каждая из которых требует от агента непрерывной работы в течение не менее 12 часов. Такая конструкция преодолевает ограничения краткосрочных оценок, более реалистично моделируя поведение агентов в течение длительных периодов времени в сложных динамичных условиях. Для создания этой строгой тестовой платформы команда собрала около 38 000 часов данных о взаимодействии.

Результаты выявили заметную закономерность: эффективность обучения агентов в реальной среде в значительной степени соответствует логарифмико-сигмоидальной кривой, достигая коэффициента R² равного 0,998. Это свидетельствует о высокой закономерности процесса обучения. Кроме того, данные за период с сентября 2025 года по май 2026 года показывают, что скорость обучения передовых моделей значительно возросла, удваиваясь каждые три месяца.
EdgeBench предоставил разработчикам 51 задачу с открытым исходным кодом вместе со всей своей системой оценки. Несмотря на то что проект все еще находится на этапе академических исследований, это первый тестовый набор, позволяющий количественно охарактеризовать закономерности долгосрочного обучения в условиях окружающей среды. Для исследователей в области ИИ эти закономерности представляют собой не только конкретный показатель для оценки производительности моделей, но и ориентир для повышения адаптивности агентов к окружающей среде и эффективности обучения в будущем.
Связанная статья
Ctrip Business Travel представляет экосистему искусственного интеллекта, включающую 7 отраслевых агентов и 17 ключевых функций
Ctrip Business Travel официально представила «Экосистему искусственного интеллекта Ctrip Business Travel», которая использует крупные языковые модели для коренной перестройки системы управления корпор
Stripe приобретет OpenRouter на фоне роста популярности маршрутизации на основе моделей искусственного интеллекта
Компания Stripe согласилась приобрести OpenRouter — платформу для маршрутизации моделей искусственного интеллекта, которая предоставляет разработчикам доступ к сотням моделей через единый интерфейс. Э
Бывший исследователь OpenAI Барретт Зоф возвращается в Google для участия в разработке Gemini
Баррет Зоф, который ранее внезапно уволился и перешел в OpenAI из-за разногласий с генеральным директором Thinking Machines Lab Мириам Муларати, вновь сменил работодателя. Компания Google, входящая в
Рекомендации по связанным специальным темам
Комментарии (1)
В связи с быстрым развитием искусственного интеллекта оценка эффективности непрерывного обучения агентов в реальных сценариях стала ключевым направлением как для исследователей, так и для промышленности. Команда ByteDance Seed недавно представила «EdgeBench» — долгосрочный тестовый набор, предлагающий новый количественный стандарт для этой области исследований.
Основное преимущество EdgeBench заключается в акценте на обучении в реальных условиях. Он включает 134 задачи в шести областях, каждая из которых требует от агента непрерывной работы в течение не менее 12 часов. Такая конструкция преодолевает ограничения краткосрочных оценок, более реалистично моделируя поведение агентов в течение длительных периодов времени в сложных динамичных условиях. Для создания этой строгой тестовой платформы команда собрала около 38 000 часов данных о взаимодействии.

Результаты выявили заметную закономерность: эффективность обучения агентов в реальной среде в значительной степени соответствует логарифмико-сигмоидальной кривой, достигая коэффициента R² равного 0,998. Это свидетельствует о высокой закономерности процесса обучения. Кроме того, данные за период с сентября 2025 года по май 2026 года показывают, что скорость обучения передовых моделей значительно возросла, удваиваясь каждые три месяца.
EdgeBench предоставил разработчикам 51 задачу с открытым исходным кодом вместе со всей своей системой оценки. Несмотря на то что проект все еще находится на этапе академических исследований, это первый тестовый набор, позволяющий количественно охарактеризовать закономерности долгосрочного обучения в условиях окружающей среды. Для исследователей в области ИИ эти закономерности представляют собой не только конкретный показатель для оценки производительности моделей, но и ориентир для повышения адаптивности агентов к окружающей среде и эффективности обучения в будущем.
Ctrip Business Travel представляет экосистему искусственного интеллекта, включающую 7 отраслевых агентов и 17 ключевых функций
Ctrip Business Travel официально представила «Экосистему искусственного интеллекта Ctrip Business Travel», которая использует крупные языковые модели для коренной перестройки системы управления корпор
Stripe приобретет OpenRouter на фоне роста популярности маршрутизации на основе моделей искусственного интеллекта
Компания Stripe согласилась приобрести OpenRouter — платформу для маршрутизации моделей искусственного интеллекта, которая предоставляет разработчикам доступ к сотням моделей через единый интерфейс. Э
Бывший исследователь OpenAI Барретт Зоф возвращается в Google для участия в разработке Gemini
Баррет Зоф, который ранее внезапно уволился и перешел в OpenAI из-за разногласий с генеральным директором Thinking Machines Lab Мириам Муларати, вновь сменил работодателя. Компания Google, входящая в











