ИИ-чатбот для рекомендаций по анализу биомедицинских изображений

Ученые из Университета Карлоса III в Мадриде (UC3M) совместно с исследователями из Ericsson и Королевского технологического института (KTH) в Швеции разработали программу на основе искусственного интеллекта, которая может искать информацию и давать рекомендации по анализу биомедицинских изображений.

Новый помощник, названный BioImage.IO Chatbot и представленный в журнале Nature Methods, создан для решения проблемы информационной перегрузки у исследователей. "Мы поняли, что многим ученым приходится обрабатывать большие объемы технической документации, что может стать утомительной и сложной задачей", — объясняет Катерина Фустер Барсело, исследователь из UC3M.

Цель — облегчить доступ к информации и предоставить простой интерфейс, чтобы ученые могли сосредоточить время на анализе биоизображений, а не на программировании.

Чатбот позволяет исследователям выполнять сложные задачи анализа изображений интуитивно. Например, если нужно обработать микроскопические изображения с использованием моделей сегментации, чатбот может помочь выбрать и запустить подходящую модель.

Ассистент основан на больших языковых моделях и использует технику Retrieval-Augmented Generation (RAG), которая обеспечивает доступ к базам данных в реальном времени. "Ключевое преимущество в том, что мы не обучаем модель конкретной информации, а извлекаем ее из актуальных источников, минимизируя ошибки, известные как 'галлюцинации'", — добавляет Аррате Муньос Баррутия, профессор UC3M.

BioImage.IO Chatbot также оптимизирован для работы непосредственно с микроскопами и другим лабораторным оборудованием через систему расширений. "Еще одно преимущество — наш ассистент имеет открытый исходный код, что позволяет другим разработчикам создавать новые модули и улучшать инструмент", — отмечает Муньос Баррутия.

Модель была доработана исследователями UC3M в сотрудничестве с Ericsson и при значительном вкладе Ванлу Лей, Габриэля Редера и Вей Оуянга из KTH. Команда недавно представила разработку на конгрессе From Images to Knowledge (I2K 2024) в Милане.

Чатбот успешно интегрирован в облачные платформы, работающие в веб-браузерах, что позволяет выполнять запросы к базам данных для анализа изображений в реальном времени. Эта расширяемость облегчает интеграцию в различные рабочие процессы, включая сторонние сайты и исследовательские системы.

В дальнейшем исследователи планируют расширить возможности чатбота с помощью более универсальной ИИ-модели, способной читать научные статьи и помогать в планировании экспериментов. Это может открыть путь к расширенной автоматизации в исследованиях и большей демократизации доступа к сложным научным инструментам.