Компьютерное зрение при лапароскопии поможет при анализе операции и обучении
При лапароскопической операции часто ведется видеозапись, которая осуществляется прямо через эндоскопический объектив. Это делается благодаря тому, что в современных коммерческих эндоскопических системах встроено записывающее оборудование. Но при этом совсем не просто просматривать все эти часы записи, чтобы найти что-то, что будет полезным для обучения врачей или может быть, скажем, использовано для улучшения оборудования, имеющего отношение к лапароскопии.
Ученые Массачусетского технологического института (США) разработали новую систему обработки видео, которая может самостоятельно идентифицировать различные стадии лапароскопической операции, потенциально позволяя исследователям быстро находить релевантные сцены, которые они затем могут изучать.
Обеспечивающий работу этой системы алгоритм компьютерного видения может заметить, когда берется биопсия, промывается рана, зашиваются ткани или производятся другого рода действия. Кроме этого, систему можно запрограммировать для нахождения и других действий при операции.
Несмотря на то, что программное обеспечение было разработано для анализа предварительно записанного видео, оно в принципе может помогать хирургу и во время операции, распознавая действия, которые он предпринимает, и предупреждая его, когда что-то выглядит ненормально. Программа может также подсказывать хирургу, когда и какие инструменты использовать, и вообще работать как дополнительные внимательные глаза, наблюдающие за проведением процедуры.
По словам одного и авторов разработки Даниэлы Рус,
Хирурги были в восторге от возможностей, которые предоставляет наша работа. Им очень понравилось, что алгоритм автоматически сегментирует и индексирует запись операции, что позволяет использовать подобное видео для тренировок и обучения. И теперь не надо просматривать каждую минуту записи для того, чтобы найти нужный ее фрагмент. Еще им очень понравилась функция, которая появится в нашей системе в будущем - возможность в реальном времени осуществлять мониторинг операции.