Разработка позволяет превращать снимки компьютерной томографии (КТ) и магнитно-резонансной томографии (МРТ) в трехмерные модели органов пациента, которые хирург видит через AR-очки.
Автором технологии является нейрохирург Харьковской областной клинической больницы Владислав Калюжка, а первый прототип создал соучредитель проекта, кардиолог Никита Маркевич. В Харькове провели первые примерно 50 операций с использованием AR-очков во время вмешательств на головном и спинном мозге – при новообразованиях, сосудистых патологиях, травмах и врожденных пороках.
После этого команда создала стартап и привлекла специалистов по IT, в частности Unity-разработчиков, инженеров по искусственному интеллекту и дизайнеров.
В Минздраве пояснили, что технология Extra Vision работает на основе данных КТ и МРТ, из которых алгоритмы ИИ автоматически выделяют анатомические и патологические структуры. Созданная 3D-модель загружается в облачную среду и синхронизируется с AR-очками. Модель отображается в реальном пространстве, накладываясь на тело пациента, а система отслеживает движения инструментов и рук хирурга.
Extra Vision применяют в коммунальных, государственных и частных медицинских учреждениях Харькова и Киева. Команда также тестирует использование технологии в ортопедии, травматологии, онкологии, маммологии, гепатобилиарной и челюстно-лицевой хирургии, добавили в ведомстве.