Научные и визуальные агенты
Idea Search отделяет пространство научных идей от мутаций кода
Idea Search раскладывает известные методы на атомарные идеи, направляет ими
ветви code search и пополняет банк результатами выполненных экспериментов. На
интеграции single-cell RNA-seq средний score вырос с 0,678 у сильного tree-search
baseline до 0,697, лучший запуск достиг 0,728.
Прирост 0,019 относится к одной задаче, а лучший run нельзя подменять средним.
Авторы также показывают полезную отрицательную границу: расширение банка
помогало bandit sampling, но не random sampling; слишком сильный exploration
ухудшал результат.
Система ищет не только следующий patch, но и направление поиска. Такой второй
уровень полезен, если идея связана с experiment outcome и может быть отвергнута,
а не становится ещё одним красивым текстом в памяти агента.
Источник: Idea Search.
Visual tool нужно вызывать только там, где он улучшает evidence
ToolVision разбирает два провала обучения. Маленький student копирует trajectory
слишком сильного teacher, не обладая тем же восприятием. Outcome-only RL, в свою
очередь, учится избегать ненадёжного инструмента даже на задачах, где он нужен.
Авторы строят SFT data через multi-agent exploration и student-scale committee,
а перед RL сравнивают успех ученика с tool и без него. Reward за tool use
появляется только там, где измерена польза. ToolVision-8B улучшила baseline на
семи тестах и обошла названные 7–8B модели на трёх high-resolution benchmarks.
Код и datasets на момент публикации лишь обещаны, результаты авторские.
Методическая мысль сильнее score: учить нужно не ритуалу «вызови инструмент», а
условию, при котором он добавляет доступное ученику доказательство.
Источник: ToolVision.