Медицинские учреждения США начнут публично оценивать ИИ-модели для здравоохранения

С момента появления ChatGPT в 2022 году технологические компании ускоренно внедряют генеративные ИИ-решения в сферу здравоохранения. Однако медицинские учреждения сталкиваются с проблемой выбора подходящих инструментов и их сравнительной оценки.

Чтобы решить эту задачу, группа медицинских организаций во главе с бостонским Mass General Brigham запустила инициативу Healthcare AI Challenge Collaborative. В рамках проекта врачи протестируют последние разработки в симулированных клинических условиях, сравнив их эффективность напрямую. Результаты тестирования и рейтинги будут опубликованы до конца года.

На данный момент в инициативе участвуют Emory Healthcare, отделения радиологии Университета Висконсина и Университета Вашингтона, а также Американский колледж радиологии. В будущем планируется расширить круг участников.

Специалисты протестируют девять моделей, включая решения от Microsoft, Google, Amazon Web Services, OpenAI и Harrison.AI. Основные критерии оценки включают составление отчетов, выявление ключевых находок, диагностику и другие аспекты.

Инициатива возникла на фоне отсутствия общепринятых стандартов для оценки ИИ в здравоохранении. По словам Ричарда Брюса, доцента радиологии Университета Висконсина, сегодня практически невозможно провести объективное сравнение продуктов, поскольку индустрия до сих пор полагается на субъективные отзывы и разрозненные примеры.

Healthcare AI Challenge Collaborative станет первым проектом, предоставляющим медицинским учреждениям возможность напрямую оценить и сравнить различные ИИ-решения, что, как считают участники, уже давно назрело.