ОтветыОпубликовано15 источники
HarnessPro настраивает обвязку ИИ-агента под баланс цены и результата
HarnessPro меняет не саму языковую модель, а её «обвязку»: инструкции, доступные инструменты и правила выполнения задач.[3][11] Фреймворк проверяет предложенные изменения на синтезированных тестах и сохраняет варианты Lite, Medium и Heavy для разных компромиссов между стоимостью и результатом.[11] В одном сравнении...
ОпубликовалОтредактировано с помощью GPT-6 LunaИзображения созданы с помощью GPT Image 2
Ответ на исследование
Ключевые выводы
- HarnessPro меняет не саму языковую модель, а её «обвязку»: инструкции, доступные инструменты и правила выполнения задач.[3][11]
- Фреймворк проверяет предложенные изменения на синтезированных тестах и сохраняет варианты Lite, Medium и Heavy для разных компромиссов между стоимостью и результатом.[11]
- В одном сравнении на Terminal Bench 2 версия Heavy показала результат 80,8% при стоимости 0,72 доллара за задачу; у RHO — 76,3% и 1,09 доллара.[16]
Промпт ИИ
openai.comCreate a landscape editorial hero image for this Studio Global article: What is HarnessPro, released by researchers from Tsinghua University, Zhipu, Shanghai Jiao Tong University, the University of Warwick and Ku. Article summary: HarnessPro is a self-supervised framework for recursively improving an AI agent’s **harness**—the instructions, tools and runtime policies around it—while optimizing both task success and execution cost.[2][16] Its disti. Topic tags: general, academic, general web. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts with fake num
HarnessPro — фреймворк, который итеративно улучшает обвязку ИИ-агента: инструкции, инструменты и правила, определяющие, как агент выполняет задачу. Идея в том, что удачно настроенная обвязка может повысить результат и одновременно сократить расходы на выполнение.3
11
Что такое обвязка агента
Агент — это не только языковая модель. Вокруг неё есть набор инструкций и инструментов, а также правила работы во время выполнения задачи. Всё это и называют обвязкой. Она влияет на то, как агент действует, сколько ресурсов тратит и справляется ли с заданием.11
Как HarnessPro ищет улучшения
Фреймворк анализирует записи предыдущих запусков — так называемые трассы выполнения. По ним он выявляет типичные ошибки и источники затрат, а затем предлагает изменения в обвязке. Кандидатные варианты проверяются на синтезированных тестах: для оптимизации не требуется заранее иметь эталонные ответы или использовать официальные тесты.11
Процесс повторяется: новые варианты можно оценивать и дорабатывать в следующих раундах. Это способ менять рабочую конфигурацию агента, а не обучать заново саму модель.3
11
Зачем нужны Lite, Medium и Heavy
Не всегда разумно выбирать настройку с максимальным результатом: она может обходиться дороже. HarnessPro сохраняет три варианта, представляющие разные точки компромисса между стоимостью и производительностью:
- Lite — приоритет меньшим затратам;
- Medium — баланс цены и результата;
- Heavy — приоритет более высокой производительности.
11
Такой подход позволяет выбирать конфигурацию под конкретные условия использования, а не считать один вариант лучшим для всех задач.11
Что показали тесты
На странице проекта приведено сравнение GPT-5.5 с Codex на Terminal-Bench 2. Вариант HarnessPro Heavy прошёл 80,8% тестов при стоимости 0,72 доллара за задачу. Для RHO указаны 76,3% и 1,09 доллара соответственно.16
Отдельные исследовательские обзоры сообщают, что в описанной оценке Heavy в среднем повысил долю успешно пройденных задач на 2 процентных пункта и снизил стоимость одной задачи на 26,1% относительно RHO.7
20
Эти показатели относятся к конкретным моделям, конфигурациям и тестовым наборам. Они не гарантируют такого же улучшения при любом развёртывании. Наличие Lite, Medium и Heavy как раз отражает то, что экономичность и производительность не всегда совпадают.11
16
Studio Global AI
Продолжайте свое исследование
На этой странице есть ответ, подтвержденный источником, который вы можете продолжить внутри Studio Global.
Люди также спрашивают
Каков краткий ответ на вопрос «HarnessPro настраивает обвязку ИИ-агента под баланс цены и результата»?
HarnessPro меняет не саму языковую модель, а её «обвязку»: инструкции, доступные инструменты и правила выполнения задач.[3][11]
Какие ключевые моменты необходимо проверить в первую очередь?
HarnessPro меняет не саму языковую модель, а её «обвязку»: инструкции, доступные инструменты и правила выполнения задач.[3][11] Фреймворк проверяет предложенные изменения на синтезированных тестах и сохраняет варианты Lite, Medium и Heavy для разных компромиссов между стоимостью и результатом.[11]
Что мне делать дальше на практике?
В одном сравнении на Terminal Bench 2 версия Heavy показала результат 80,8% при стоимости 0,72 доллара за задачу; у RHO — 76,3% и 1,09 доллара.[16]