AR-MR app for medical files (MRI, CT, Ultrasound)

AR/MR-приложение для визуализации фантома щитовидной железы.

Интерактивное AR/MR приложения для визуализации 3D-моделей анатомического атласа органов человека (органы шеи, верхней части туловища и головы) и медицинских сканов (МРТ, КТ, УЗИ), с возможностью управления через трекинг рук на гарнитуре Quest 3.

Ключевые особенности:

• Управление руками: Использование трекинга рук и жестов для взаимодействия с интерфейсом.
• Визуализация данных:
  • Отображение 3D-моделей органов (фантома щитовидной железы, органы шеи, верхней части туловища и головы);
  • Загрузка и обработка медицинских сканов (DICOM / .dcm – папка, в которой содержатся эти данные) с настройкой рендеринга (прозрачность, изоповерхности), настройка срезов и настройка пропускаемости света и излучения;
  • Режимы визуализации: анатомический атлас, схематичное представление.
• AR-режим: Совмещение 3D-моделей с реальным окружением через Passthrough-камеру Quest 3.
• Интеграция Quest 3 как устройства визуализации с ПК в роли вычислительного устройства.

Применение: Обучение медиков, диагностика, презентации медицинских данных в AR.

Данный проект имеет открытый исходный код.

Если вы хотите узнать больше о проекте или получить тестовые данные, можете посетить репозиторий на GitHub, этого проекта: https://github.com/Dmitriy-OLW/AR-Project-Sezriv-Ralizonki

Eng:

AR/MR App for Visualization Thyroid Phantom

An interactive AR/MR application for visualizing 3D models from an anatomical atlas of human organs (organs of the neck, upper torso, and head) and medical scans (MRI, CT, ultrasound), with hand-tracking controls on the Quest 3 headset.

Key Features:

• Hand Controls: Use hand tracking and gestures to interact with the interface.
•  Data Visualization:
  
  • Display 3D organ models (thyroid phantom, neck, upper torso, and head organs); 
  •  Load and process medical scans (DICOM/.dcm – a folder containing this data) with rendering settings (transparency, isosurfaces), slice adjustments, and light/radiation permeability settings; 
  • Visualization modes: anatomical atlas, schematic representation. 
• AR Mode: Overlay 3D models onto the real environment via Quest 3’s Passthrough camera. 
• PC Integration: Use Quest 3 as a visualization device with a PC as the computing unit.

Applications: Medical training, diagnostics, and medical data presentations in AR.

This project is open-source.

If you'd like to know more about the project or access test data, visit the GitHub repository: https://github.com/Dmitriy-OLW/AR-Project-Sezriv-Ralizonki