Loading...

Meta-Learning in Segmentation of 3D Medical Images

Mozafari, Mohammad | 2024

0 Viewed
  1. Type of Document: M.Sc. Thesis
  2. Language: Farsi
  3. Document No: 57152 (19)
  4. University: Sharif University of Technology
  5. Department: Computer Engineering
  6. Advisor(s): Soleymani Baghshah, Mahdieh
  7. Abstract:
  8. Few-shot segmentation (FSS) models have gained popularity in medical imaging analysis due to their ability to generalize well to unseen classes with only a small amount of annotated data. A key requirement for the success of FSS models is a diverse set of annotated classes as the base training tasks. This is a difficult condition to meet in the medical domain due to the lack of annotations, especially in volumetric images. To tackle this problem, self-supervised FSS methods for 3D images have been introduced. However, existing methods often ignore intravolume information in 3D image segmentation, which can limit their performance. To address this issue, we propose a novel selfsupervised volume-aware FSS framework for 3D medical images, termed VISA-FSS. In general, VISA-FSS aims to learn continuous shape changes that exist among consecutive slices within a volumetric image to improve the performance of 3D medical segmentation. To achieve this goal, we introduce a volume-aware task generation method that utilizes consecutive slices within a 3D image to construct more varied and realistic selfsupervised FSS tasks during training. In addition, to provide pseudolabels for consecutive slices, a novel strategy is proposed that propagates pseudo-labels of a slice to its adjacent slices using flow field vectors to preserve anatomical shape continuity. In the inference time, we then introduce a volumetric segmentation strategy to fully exploit the interslice information within volumetric images. Comprehensive experiments on two common medical benchmarks, including abdomen CT and MRI, demonstrate the effectiveness of our model over state-of-the-art methods
  9. Keywords:
  10. Deep Learning ; Metalearning ; Self-Supervised Learning ; Few-Shot Learning ; Few-Shot Three Dimentional Medical Image Segmentation ; Few-Shot Segmentation ; Segmentation

 Digital Object List

 Bookmark

  • 1 مقدمه
    • 1-1 تعریف‌ مسئله
      • 1-1.1 ناحیه‌بندی چندنمونه‌ای
      • 1-1.2 ناحیه‌بندی چندنمونه‌ای در تصاویر حجمی
    • 1-2 اهمیت و کاربرد
    • 1-3 چالش‌ها
    • 1-4 هدف پژوهش
    • 1-5 رویکرد حل مسئله و نوآوری‌های اصلی
    • 1-6 ساختار پایان‌نامه
  • 2 پژوهش‌های پیشین
    • 2-1 دسته‌بندی چندنمونه‌ای
      • 2-1.1 شبکه‌های مبتنی بر نمونه‌ی اولیه
    • 2-2 مدل‌های دوشاخه برای ناحیه‌بندی چندنمونه‌ای تصاویر طبیعی و پزشکی
    • 2-3 مدل‌های مبتنی‌ بر نمونه‌ی اولیه در تصاویر طبیعی
      • 2-3.1 مدل PANet
    • 2-4 مدل‌های مبتنی بر نمونه‌ی اولیه در ناحیه‌بندی چند نمونه‌ای تصاویر پزشکی حجمی
      • 2-4.1 مدل SSLALPNet
      • 2-4.2 مدل RPNet
    • 2-5 جمع‌بندی
  • 3 راهکار پیشنهادی
    • 3-1 فرمول‌بندی مسئله
    • 3-2 ساختن وظایف خودنظارتی
      • 3-2.1 بدست آوردن یک شبه‌برچسب از روی یک تصویر دوبعدی
      • 3-2.2 تولید وظایف ساختگی
      • 3-2.3 تولید وظایف واقعی
    • 3-3 معماری شبکه
      • 3-3.1 استخراج ویژگی
      • 3-3.2 استخراج نمونه‌های اولیهprototypes
      • 3-3.3 ناحیه‌بندی بر اساس شباهت
    • 3-4 توابع هزینه
      • 3-4.1 تابع هزینه اصلی
      • 3-4.2 تابع هزینه منظم‌ساز
      • 3-4.3 تابع هزینه 2.5 بعدی
    • 3-5 نحوه‌ی آموزش مدل
    • 3-6 روش ناحیه‌بندی در زمان آزمون
    • 3-7 جمع‌بندی
  • 4 ارزیابی و مقایسه با کارهای پیشین
    • 4-1 معرفی دیتاستdataset های مورد استفاده
    • 4-2 معرفی معیارهای ارزیابی
    • 4-3 تنظیمات آزمایش‌ها
    • 4-4 نتایج کیفی و کمی
    • 4-5 مطالعات فرسایشیAblation Studies
      • 4-5.1 تاثیر وظایف ساختگی و واقعی
      • 4-5.2 اهمیت استفاده از روش زمان آزمون
      • 4-5.3 اهمیت تعداد پرسمان‌ها در وظایف واقعی
    • 4-6 تنظیمات و منابع سخت افزاری
    • 4-7 جمع‌بندی
  • 5 جمع‌بندی و کارهای آتی
    • 5-1 نقاط قوت روش پیشنهادی
    • 5-2 کارهای آتی
  • مراجع
...see more