Production agents
LinkedIn замкнул изменение support-agent на offline eval и A/B
LinkedIn соединил RAG, evolutionary auto-prompting и versioned evaluation без
переобучения foundation model. Изменения prompts и retrieval проходят
operational guardrails, сначала проверяются offline, затем — в randomized
production A/B.
За две недели компания сообщает рост QA self-serve на 9,0 процентного пункта,
cancellation self-serve на 4,8 пункта и routing accuracy на 30,6 пункта. Это
абсолютные изменения конкретных support flows, не общий deflection LinkedIn.
Размеры выборок и интервалы в abstract не раскрыты.
Здесь «self-evolving» не означает право агента бесконтрольно переписать себя.
Search предлагает вариант, версия сохраняется, gate отбрасывает плохое, а
пользовательский эксперимент проверяет business outcome. Эволюционирует
кандидат, но production меняется только после внешнего доказательства.
Источник: self-evolving support agent LinkedIn.
Персональный skill извлекают из истории разработчика — вместе с риском устареть
Исследование строит компактный skill из прошлых взаимодействий конкретного
разработчика: conventions, команд, предпочтений и повторяющихся исправлений.
Затем проверяет его на новых задачах и отдельно ищет regressions, когда старое
предпочтение конфликтует с текущей работой.
Текущая arXiv-страница обновлена позднее, поэтому для выпуска используются
только вопрос и метод из v1 без добавленных затем чисел. Персональная история
несёт privacy и leakage risk, а повторяющаяся convention одного проекта не
обязана переноситься на другой.
Важна граница персонализации. Skill полезен не потому, что «знает пользователя»,
а потому, что делает конкретные рабочие правила явными и проверяемыми. Он должен
иметь scope, дату и условие отмены — иначе память превращает вчерашнюю привычку
в сегодняшнее требование.
Источник: personalized skills for coding agents.