Материал подготовлен автоматически по первоисточникам: ссылки на них — в конце статьи.
Qingyang Shao и соавторы представили Bioinfoysis — многоагентный исполняющий контур для длительных биоинформатических задач; работа опубликована как препринт, не проходивший рецензирования. На BixBench авторы измерили точность 82,4%. Результат важен командам, которые проектируют агентные системы для анализа научных данных, где итоговый ответ должен оставаться связанным с кодом, файлами и промежуточными вычислениями.
Что сделали
Bioinfoysis представляет запрос не как диалог, а как сохраняемый запуск со входными файлами, состоянием процесса, планом и результатами. Планировщик составляет исполняемый список шагов, после каждого действия получает структурированную передачу результата и при необходимости меняет ещё не выполненную часть плана. Передача связывает вывод и созданные файлы с конкретным агентом, шагом и версией плана, поэтому результат из старой версии не должен автоматически попадать в новую.
Роли разделены между координатором, планировщиком, исследователем, программистом и составителем отчёта. Код выполняется в изолированной среде, а таблицы, скрипты и графики проверяются до использования на следующих этапах. Отдельная трассировка сохраняет вызовы моделей и инструментов, ошибки и происхождение артефактов.
По разбору компонентов авторами, удаление постоянной памяти снизило точность на BixBench на 22,4 процентного пункта. Это указывает, что в их конфигурации сохранение точных промежуточных данных влияло на результат сильнее, чем замена одной модели другой.
Что это значит
Для продуктовой архитектуры работа предлагает отделять модель от контура исполнения. Длинный анализ требует версионируемого состояния, проверяемых артефактов и правил передачи результатов между агентами; одной истории сообщений для этого недостаточно. Такой подход также упрощает возобновление процесса после сбоя и поиск этапа, на котором возникла ошибка.
Ограничения. Проверка охватывает 205 заданий BixBench и два направления LAB-Bench 2, а сравнение моделей проведено на четырёх семействах. Эти тесты в основном оценивают правильность конечных ответов и не показывают пригодность выбранной статистической модели, устойчивость биологической интерпретации или воспроизводимость при альтернативной реализации. Авторы также отмечают неполное покрытие инструментами и процедурами редких организмов, нестандартных геномов и специализированных методов. Поэтому замеры не устанавливают надёжность Bioinfoysis в открытых исследовательских проектах с иными данными и вычислительными средами.
Источники
Иллюстрация: рисунок из статьи «Bioinfoysis Technical Report», Qingyang Shao, Xin Zhang, Zhouyang Yuan и др., CC BY 4.0
Похоже на вашу задачу?
Расскажите, что собираете. За полчаса разложим на этапы и назовём сроки — это бесплатно и ни к чему не обязывает.
