Центр искусственного интеллекта и робототехники (CAIR), входящий в состав Гонконгского института науки и инноваций Китайской академии наук, представил CARES 4.0 — систему мультимодального клинического ИИ-агента. Запуск состоялся на IV Симпозиуме по клинической робототехнике и воплощенному ИИ, который организован CAIR совместно с Корпорацией парков науки и технологий Гонконга в Научном парке Гонконга.
CAIR объявил о выпуске фреймворка агента и общего инструментария, а также о постепенном внедрении медицинских инструментариев. Модели для ультразвукового исследования и хирургических видео будут доступны на платформе бесплатно.
Директор CAIR, Лю Хунбин, сообщил изданию Leiphone, что изменения носят качественный, а не количественный характер. Предыдущие версии, от 1.0 до 3.0, представляли собой инструменты, которые отвечали на вопросы по изображениям или видео, и которыми врачи должны были пользоваться самостоятельно. Версия 4.0 является агентом, способным выполнять задачи.
В качестве примера, руководитель отделения, которому требовался отчет о хирургическом объеме, расходе расходных материалов и составе пациентов за прошлый месяц, ранее нуждался в помощи с помощью CARES 3.0; теперь же агент может собрать этот отчет, уточняя необходимый тип анализа.
Система построена на основе фреймворка Harness agent и собственных фундаментальных моделей CAIR для КТ, МРТ, ультразвука, эндоскопии и ЭЭГ. CAIR подтверждает, что система прошла валидацию в ряде ведущих больниц по трем направлениям: помощь в диагностическом процессе от жалобы до патологии, ответы на вопросы естественного языка об операционной деятельности отделения (например, загрузка оборудования и состав случаев), а также проведение статистического анализа и простых моделей машинного обучения на специализированных наборах данных.
Лю подчеркнул, что CARES функционирует как помощник и предоставляет рекомендации. Он признал, что ИИ иногда может допускать галлюцинации, и отметил, что первоочередной задачей является минимизация этого риска, особенно при предоставлении советов, касающихся принятия решений. Система спроектирована так, чтобы следовать логике клиницистов, используя руководства и свежую литературу, структурированную в виде данных, и каждая рекомендация сопровождается путем рассуждений и источниками.
Лю заявил: «Врач является конечным лицом, принимающим решения». Одна функция, уже применяемая в клинической практике, — это предупреждение о пространственном риске во время процедур, которое оповещает врача, когда инструмент приближается к крупным сосудам или нервам. Например, при бронхоскопии в Первой аффилированной больнице Университета Сунь Ятсена система может отметить, что видимое утолщение на стенке дыхательных путей на самом деле является частью кровеносного сосуда, и биопсия в этом месте может повредить артерию.
Лю добавил, что системы CAIR, в основном более ранние инструменты, используются более чем в 30 больницах, включая рабочие станции для ларингоскопии в более чем 10, бронхоскопии в более чем четырех и ультразвука в более чем 10. По словам врачей, наиболее частые запросы связаны с уменьшением усилий и более четким отображением информации, чтобы вывод ИИ не был неправильно истолкован.