Анализ медицинских изображений всегда сталкивался с проблемой огромных и сложных данных изображений МРТ. Традиционные методы разрезают 3D-изображения МРТ на 2D-изображения для анализа, что ограничивает понимание сложных анатомических структур. Однако на конференции AWS re:Invent компания GE Healthcare представила первую в отрасли базовую модель исследования 3D-МРТ всего тела, что привело к прорыву в решении этой проблемы. Модель построена на более чем 173 000 изображений, требует в пять раз меньше вычислительной мощности для обучения, чем раньше, позволяет анализировать сложные данные 3D-МРТ в реальном времени, поддерживает поиск и связывание изображений и текста, а также сегментацию и классификацию заболеваний. .
Изображения МРТ всегда были проблемой при анализе медицинских изображений из-за их сложности и большого объема данных. Чтобы обучить большую языковую модель (LLM) для МРТ-анализа, разработчикам приходится разрезать полученные изображения на 2D-изображения. Хотя такая обработка возможна, она ограничивает способность модели анализировать сложные анатомические структуры, особенно в опухолях головного мозга, в комплексе. таких случаях, как заболевания костей или сердечно-сосудистые заболевания.
Примечание к источнику изображения: изображение генерируется искусственным интеллектом и поставщиком услуг авторизации изображений Midjourney.
Однако на конференции AWS re:Invent в этом году компания GE Healthcare представила первую в отрасли базовую модель исследования 3D-МРТ всего тела (FM), что означает, что модели МРТ наконец-то могут использовать 3D-изображения всего тела. Модель была построена на основе более чем 173 000 изображений из 19 000 исследований, и команда разработчиков заявила, что с помощью этой новой модели обучение требует в пять раз меньше вычислительной мощности, чем раньше.
Хотя GE Healthcare еще не коммерциализировала эту базовую модель, она все еще находится на стадии исследования, и один из первых оценщиков компании Mass General Brigham собирается начать экспериментальное использование модели. Пэрри Бхатия, директор по искусственному интеллекту GE Healthcare, сказал, что надеется передать эти модели техническим командам медицинской системы, чтобы помочь им быстрее и экономичнее разрабатывать исследования и клинические приложения.
Появление этой модели позволит анализировать сложные данные 3D-МРТ в режиме реального времени. Команда GE Medical накопила за десять лет передовые технологии. Ее флагманский продукт AIR Recon DL — это алгоритм реконструкции с глубоким обучением, который может помочь рентгенологам быстрее получать четкие изображения и сократить время сканирования до 50%. Кроме того, 3D-модель МРТ может поддерживать поиск и связывание изображений и текста, а также сегментацию и классификацию заболеваний, что позволяет медицинским работникам получать более подробную информацию о сканировании, чем когда-либо прежде.
Что касается обработки данных, команда разработчиков приняла стратегию «корректировки и адаптации», позволяющую модели обрабатывать множество различных наборов данных. Даже если некоторые данные изображения неполны, модель может пропускать недостающие части. Кроме того, для улучшения обучаемости модели в условиях ограниченных данных также используются методы обучения студентов и учителей под пристальным наблюдением.
Чтобы решить проблемы с вычислениями и данными, возникшие при построении этой сложной модели, GE Healthcare использовала платформу Amazon SageMaker в сочетании с возможностями распределенного обучения высокопроизводительных графических процессоров, чтобы значительно повысить скорость обработки данных и эффективность обучения модели. Все это делается при обеспечении соблюдения стандартов соответствия, таких как HIPAA, чтобы предоставить пациентам более персонализированные медицинские услуги.
На данный момент модель ориентирована на МРТ, но разработчики видят огромные возможности для расширения и в других областях медицины. В будущем, основываясь на этой базовой модели, возможно, появится возможность предоставлять более быстрые и эффективные решения для таких областей, как лучевая терапия.
Выделять:
GE Healthcare представляет первую в отрасли базовую модель 3D-МРТ всего тела, значительно улучшающую возможности анализа изображений.
Новая модель снижает потребление вычислительных ресурсов и повышает эффективность обучения за счет корректировки стратегий обработки данных.
Ожидается, что в будущем эта модель будет распространена на другие области медицины, чтобы обеспечить более точные медицинские услуги.
Базовая модель 3D-МРТ-исследования компании GE Healthcare знаменует собой новую эру анализа медицинских изображений. Ее эффективные возможности анализа и потенциальные перспективы применения будут значительно способствовать прогрессу медицинских технологий и предоставлять более точные и удобные результаты медицинским услугам. Ожидается, что в будущем эта модель будет применяться в других областях для дальнейшего повышения эффективности медицинской диагностики и лечения.