Адаптивный ИИ встречает XR: Как Lucid Reality Labs и Unity переопределяют практическое медицинское обучение

Упрощение образования с использованием технологий, которое улучшает результаты для пациентов: Пример использования Unity

Сочетание адаптивного наставничества на основе ИИ и погружающего моделирования для практики высокорисковых процедур.

Lucid Reality Labs является лидером в области расширенной реальности (XR) и ИИ-решений для бизнеса, а также давним партнером Unity, специализирующимся на цифровых двойниках, погружающем обучении и моделировании, повышении производительности, активации пространственных продуктов и агентном ИИ.

Компания, являющаяся частью программы партнеров Unity, создает высококачественный погружающий контент, который улучшает обучение, ускоряет процессы и облегчает принятие решений на основе данных в таких критически важных секторах, как робототехника, здравоохранение, производство и образование. Ее миссия заключается в снижении рисков, повышении квалификации рабочей силы и оптимизации сложных операций, предоставляя клиентам количественный рост, повышенную эффективность и улучшенную точность - все это с значительным акцентом на человека.

Lucid Reality Labs работает с ведущими организациями для решения реальных операционных задач с помощью интеллектуальных, погружающих XR-решений, построенных на Unity. Используя стратегию, ориентированную на бизнес, компания связывает рабочие процессы и ключевые показатели эффективности каждого клиента с возможностями Unity, создавая масштабируемые, независимые от платформы приложения, которые позволяют командам практиковаться, учиться и работать в любом месте.

Доказательство на практике: Влияние на первый взгляд

Сочетание точности погружающей среды с адаптивным ИИ-руководством лучше подготавливает анестезиологов к реальным вызовам. Этот подход продемонстрировал измеримые преимущества в повышении клинической уверенности и готовности к процедурам.

Ключевые результаты решения Lucid Reality Labs включают:

• 437 участников из 18 стран завершили 491 сценарий интубации.
• 71% клиницистов оценили симулятор как полезный для обучения, и 65% выразили интерес к его внедрению для непрерывного обучения.
• Участники сообщили о повышении понимания процедур, улучшении мышечной памяти и более быстром выполнении в последующих сессиях.
• Адаптивная обратная связь в реальном времени позволила быстрее исправлять ошибки и сократить кривые обучения, улучшая сохранение навыков.
• Система масштабируемой, повторяемой структуры обеспечивает последовательные, высококачественные обучающие опыты в разных учреждениях и регионах.

Их решение для симуляции интубации XR с интегрированным ИИ-медицинским агентом, разработанное для Medtronic и основанное на Unity, было признано на награждениях Auggie, награждениях Webby и награждениях Telly за инновации в области ИИ и погружающих технологий. Этот успех подчеркивает ценность погружающего образования с поддержкой ИИ в развитии медицинских навыков и улучшении результатов для пациентов.

Международное исследование, опубликованное в British Journal of Anaesthesia, подтвердило влияние этого погружающего обучения с поддержкой ИИ, показав значительные улучшения в понимании процедур, мышечной памяти и общей производительности.

В качестве дальнейшего признания его влияния это решение недавно было представлено Samsung как трансформирующее решение в области здравоохранения на мероприятии запуска Galaxy XR в октябре 2025 года. Демонстрировалось вживую профессором доктором. Патриком Шетткером, это убедительное доказательство того, как платформа Unity в реальном времени позволяет проводить обучение XR в масштабе предприятия на следующем поколении устройств Android XR.

Срочная необходимость в масштабируемом, основанном на данных медицинском обучении

Мир столкнется с нехваткой 10 миллионов медицинских работников к 2030 году. Технологии ИИ и XR могут помочь преодолеть этот разрыв, закрыв различия в обучении, расширив доступ к экспертным рекомендациям, повысив безопасность пациентов и масштабируя развитие клинических навыков.

Обучение анестезиологии требует точности, адаптивности и безупречного выполнения. Тем не менее, традиционные модели сталкиваются с постоянными барьерами ограниченного доступа к экспертным инструкторам, зависимостью от физических симуляционных лабораторий и трудностями в предоставлении учащимся сложных или редких сценариев пациентов. Эти ограничения препятствуют масштабируемости, снижают последовательность и влияют на готовность к реальным приложениям.

Исследования показывают, что даже опытные клиницисты требуют непрерывной практики, чтобы поддерживать уверенность и уточнять принятие решений в различных профилях пациентов и настройках оборудования. Это показывает необходимость гибкой, основанной на данных системы обучения, которая позволяет проводить масштабируемые, высококачественные симуляции и может предоставлять персонализированную обратную связь в безопасной, контролируемой среде.

Преобразование обучения интубации с помощью адаптивного ИИ и расширенной реальности

Обучение интубации с использованием ИИ, разработанное Lucid Reality Labs для Medtronic и основанное на Unity, было разработано в сотрудничестве с Университетской больницей Лозанны (CHUV) и профессором доктором. Патриком Шетткером, главой анестезиологии. Это медицинское обучение переопределяет образование под руководством экспертов через адаптивное наставничество ИИ и погружающую симуляцию XR.

Опыт воссоздает операционную будущего, которая позволяет клиницистам безопасно практиковать сложные процедуры интубации под руководством цифрового двойника доктора. Шетткера. Наставник ИИ предоставляет обратную связь в реальном времени, клинические обоснования и пошаговые инструкции, соответствующие медицинским протоколам.

Учащиеся проходят через различные профили пациентов и уровни сложности. Система измеряет точность, время и принятие решений, предоставляя обратную связь и предложения для индивидуального развития навыков.

Созданная как безопасная, практическая учебная среда, она позволяет клиницистам обучаться в любое время и в любом месте - в больницах, университетах или удаленных учебных центрах, обеспечивая при этом постоянные обновления, чтобы отражать медицинские стандарты и соответствующие экспертные знания.

Система обучения использует XR Framework Unity и Interaction Toolkit для кроссплатформенной согласованности, модульности и высококачественной реалистичной симуляции в реальном времени. Основываясь на этой базе, собственная платформа iXR™ компании Lucid Reality Labs работает в синергии с Unity, интегрируямногофункциональное сотрудничество, аналитику и безопасное управление контентом в единую экосистему, которая сочетает клиническую точность с масштабируемостью для бизнеса.

Создано с помощью Unity: Технический подход и сборка

Unity находится в центре симуляции, улучшенной с помощью XR Framework Unity, XR Interaction Toolkit и собственной платформы iXR™ компании Lucid Reality Labs. Эта комбинация создает гибкую основу для модульного дизайна, многофункциональной симуляции, надежной аналитики и бесшовной доставки контента. Платформа iXR™ вводит основанные на данных инсайты, адаптивные сценарии обучения и точное отслеживание производительности, необходимые для симуляции медицинского уровня, расширяя возможности Unity.

• DevOps, созданный для масштабирования и согласованности: Безопасный поток непрерывной интеграции / непрерывного развертывания (CI/CD) стал основой масштабируемости и надежности. Команды разработки и QA работали в единой среде DevOps с автоматизированным тестированием, управлением версиями и упрощенным развертыванием. Каждая сборка была проверена на поддерживаемых устройствах XR с минимальным временем простоя, что позволяло быстро вносить изменения, снижать ручное вмешательство и обеспечивать стабильные обновления с контролем версий для высокострессового клинического обучения.
• Архитектура, не зависящая от устройства: Разработанная в Unity с использованием OpenXR Plugin, симуляция по своей сути не зависит от аппаратного обеспечения. Независимо от того, работает ли она на устройствах с отслеживанием рук, контроллерах или устройствах с отслеживанием глаз, опыт остается последовательным и интуитивно понятным - позволяя развертывание в больницах, университетах и учебных центрах по всему миру, независимо от аппаратного обеспечения XR.
• Производительность, надежность и реализм: Чтобы соответствовать требованиям точности клинического обучения, команда внедрила адаптивный рендеринг, оптимизацию задержки и глубокую профилизацию производительности. Результат - плавные, клинические частоты кадров с отзывчивым взаимодействием с инструментами, поддерживаемые телеметрией с платформы iXR™ для непрерывного совершенствования и обратной связи в реальном времени.

В чем преимущества Unity?

Lucid Reality Labs выбрала Unity за его доказанную производительность в реальном времени, кроссплатформенную масштабируемость и наиболее полную экосистему разработки XR в отрасли.

Основные технологии Unity, обеспечивающие решение, включают:

• Управление XR в Unity с OpenXR Plugin - Обеспечивает стабильную производительность на разных устройствах через единый интерфейс для развертывания на множестве аппаратных средств.
• XR Interaction Toolkit - Обеспечивает интуитивно понятное взаимодействие с инструментами и пациентами, что необходимо для процедурной реалистичности.
• Universal Render Pipeline (URP) - Сбалансирует высококачественный визуальный вывод с оптимизированной производительностью для автономных гарнитур.
• Режим пакетной сборки Unity для CI/CD - Автоматизирует тестирование и сборочные конвейеры, улучшая скорость доставки и стабильность приложения.
• Инструменты профилирования производительности - Позволяют глубоко оптимизировать, обеспечивая клинические частоты кадров и устойчивую надежность.

Процесс от проектирования до развертывания: От прототипа до клинического XR обучения

1. Дизайн, ориентированный на клиницистов: Созданный для клиницистов и с клиницистами, симуляция была сформирована вокруг аутентичных медицинских рабочих процессов и потребностей в обучении. Каждый этап проектирования сосредоточен на реалистичности, отражая процедурный поток, стандарты безопасности и клинические точки принятия решений, чтобы согласовать метрики успеха с реальными результатами операционной.

2. Прототип и тестирование: Ранние прототипы Unity были созданы для проверки моделей взаимодействия, логики AI-наставника и потока UX. Итеративное тестирование с анестезиологами и клиническими педагогами обеспечивало постоянную обратную связь, уточняя реализм, удобство использования и точность обучения для удовлетворения как образовательных, так и операционных ожиданий.

3. Интеграция контента и аналитики: Процедурные сценарии, инструменты и показатели производительности разрабатывались параллельно с учебными целями. Аналитические конвейеры были встроены на ранних этапах с использованием iXR™, что позволило осуществлять захват данных в реальном времени, отслеживание измеримого прогресса и непрерывное улучшение в ходе учебных сессий.

4. Оптимизация и пилотирование: Опыт был настроен на производительность на устройствах XR и протестирован с экспертами в предметной области для проверки точности, стабильности и клинической подлинности. Данные телеметрии из пилотных сессий информировали о финальных доработках, обеспечивая согласованность, надежность и готовность к развертыванию в корпоративной среде.

Ключевые возможности симуляции здравоохранения XR

Опыт сочетает в себе погружающий реализм, адаптивное наставничество ИИ и телеметрию клинического уровня для безопасного и последовательного масштабирования обучения экспертов.

• Гиперреальная симуляция операционной: Воспроизводит реальный клинический темп, настройку и процедурное давление с динамической корректировкой сложности для повышения уверенности и снижения когнитивной нагрузки.
• Наставник ИИ (Цифровой двойник): Интеллектуальный цифровой двойник ведущего анестезиолога предоставляет руководство в реальном времени, клиническое обоснование и адаптивную обратную связь, соответствующую проверенным медицинским протоколам.
• Дизайн, проверенный клиницистами: Разработан с участием специалистов в области анестезиологии для отражения реального оборудования, рабочих процессов и стандартов безопасности для прямой передачи навыков в реальный мир.
• Аналитика производительности и объективная оценка: Измеряет время, точность последовательности, обращение с инструментами и принятие решений для структурированных разборов и непрерывного развития навыков.
• Целостность данных и безопасное управление: Платформа iXR™ управляет контентом, ролями пользователей и аналитикой с полной прослеживаемостью, контролем версий и соблюдением обработки данных.
• Результаты, основанные на доказательствах: Каждая сессия фиксирует взаимодействия и результаты, позволяя измерять прогресс навыков, качество обучения и удержание знаний.

Масштабирование от симуляции к адаптивному обучению AI

От прототипа до глобального стандарта обучения проект прошел через три основных фазы инноваций, каждая из которых расширяла влияние медицинского образования на базе Unity:

Этап 1 - Основа VR

Иммерсивный учебный модуль, созданный на Unity для управления дыхательными путями, позже подтвержденный в международном Британском журнале анестезии с участием сотен клиницистов из 18 стран.

Результат: Симуляция XR оказалась клинически реалистичной, повторяемой и масштабируемой для практики в условиях высокого риска.

Этап 2 - AI медицинский агент

Введение интеллектуального AI-наставника, предоставляющего обратную связь и обоснование в реальном времени в одной и той же среде Unity.

Результат: Симуляция эволюционировала в интерактивное, направляемое обучение с учетом производительности и адаптивной обратной связью.

Этап 3 - Иммерсивный интерфейс для интеллекта

XR становится интерфейсом для адаптивного AI, визуализируя знания, реагируя на решения учащихся и улучшаясь через телеметрию. Улучшенное отслеживание рук и более глубокая аналитика через iXR™ усиливают персонализацию и развитие навыков.

Смотрим в будущее: Расширение адаптивного ИИ и погружающего обучения

Lucid Reality Labs продолжает развивать свою симуляционную платформу на основе ИИ для поддержки медицинского обучения на уровне предприятий и высокострессовых процедур, требующих точности, адаптивности и измеримой производительности. С Unity в качестве основного движка в реальном времени, где интеллект встречается с интерактивностью, следующий этап сосредоточен на укреплении синергии между ИИ и XR, позволяя обучению, которое учится, эволюционирует и генерирует новые сценарии по запросу.

Будущие разработки включают:

• Создание сценариев на основе ИИ, поддерживаемое платформой iXR™, позволяющее создавать модули обучения по запросу, которые адаптируются к потребностям учащихся и снижают затраты на ручную разработку.
• Управление умным контентом с Unity Asset Manager, обеспечивающее централизованные обновления, отслеживаемость и бесшовное развертывание по организациям и устройствам.
• Универсальная доступность, обеспечивающая последовательное адаптивное обучение на XR-гарнитурах, настольных компьютерах и планшетах, расширяя охват для каждого учащегося независимо от оборудования.
• Непрерывные циклы оптимизации, где аналитика возвращает улучшения и инсайты по навыкам в систему для уточнения принятия решений и ускорения кривых обучения.
• Соответствие корпоративным стандартам, с модулями, проверенными экспертами, поддерживающими соответствие стандартам GDPR, HIPAA, ISO 27001 и развивающимся клиническим лучшим практикам.

Объединив экосистему реального времени Unity с адаптивным ИИ и платформой iXR™ от Lucid Reality Labs, это решение продолжает развиваться в самоулучшающуюся, масштабируемую систему обучения - предназначенную для повышения клинической готовности, улучшения безопасности пациентов и формирования будущего медицинского образования.