Loading...

Electroencephalography Signal Based Subject Identification using Imagined Speech

Derakhshesh, Ali | 2025

0 Viewed
  1. Type of Document: M.Sc. Thesis
  2. Language: Farsi
  3. Document No: 57951 (19)
  4. University: Sharif University of Technology
  5. Department: Computer Engineering
  6. Advisor(s): Rabiee, Hamid Reza; Ebrahimpour, Reza
  7. Abstract:
  8. Biometric identification systems have become key components in data security and protecting sensitive information. Biometric methods, such as fingerprint recognition, have replaced traditional authentication methods due to their high security and efficiency. However, challenges like the potential to forge have highlighted the need for the development of more robust methods. A new approach in this field is the use of electroencephalography signals for identity verification, which not only provides high security but can also enhance the safety of brain-computer interfaces In this study, we introduce a cueless imagined speech paradigm based on natural word selection, where users select and imagine semantically meaningful words without receiving any external visual or auditory cues. This method overcomes the limitations of previous approaches and provides more realistic conditions for data collection. Based on this approach, a dataset comprising over 4,350 samples from 11 individuals (7 males and 4 females) across five sessions was gathered. These sessions, held with specified intervals, were conducted within a single day to investigate the impact of electroencephalography signal variations over time. This approach brings data collection conditions closer to real-world applications. For data processing, an automated preprocessing framework was designed by combining methods from the literature. Additionally, two-stage and end-to-end classifica- tion frameworks were optimized and evaluated by combining the models in the literature, including the feature fusion of the MOMENT foundation model with a Support Vector Machine classifier, as well as deep learning models like EEG Conformer and Shallow ConvNet. A reliable validation approach was used to ensure valid evaluation and prevent data leakage. Unlike some previous studies that selected training and test samples from the same session, this study ensured that the training and test samples were chosen from separate sessions with time intervals. Results showed that after hy- perparameter optimization and model comparison, the EliteVote model, an ensemble of the top three models in this study using a majority voting approach, achieved the highest accuracy of 98.31. Furthermore, due to its greater robustness, it was selected as the final classifier for the identity verification system
  9. Keywords:
  10. Electroencephalography ; Imagined Speech ; Brain-Computer Interface (BCI) ; Machine Learning ; Deep Learning ; Electroencphalogram Signal ; Biometrics

 Digital Object List

 Bookmark

  • مقدمه
    • مفاهیم اولیه
      • سامانه زیست‌سنجی
      • تصور گفتار
      • واسط مغز-رایانه و مراحل کلی توسعه آن
      • روش‌های ثبت فعالیت‌های مغزی
      • الکتروانسفالوگرافی
    • تعریف مسئله
    • اهمیت موضوع
    • چالش‌ها
    • راهکارها
    • ‌روش ارزیابی
    • ساختار پایان‌نامه
  • پژوهش‌های پیشین
    • رویکردهای مختلف تشخیص هویت مبتنی بر سیگنال EEG
    • رویکرد تصور گفتار
    • سایر مجموعه دادگان مبتنی بر رویکرد تصور گفتار
    • مروری بر روش‌های پیش‌پردازش سیگنال EEG
      • نمونه‌کاهی
      • فیلتر شکافی
      • فیلتر میان‌گذر
      • شناسایی و درون‌یابی کانال‌های بد
      • مرجع‌گذاری به میانگین مشترک
      • تحلیل مولفه‌های مستقل
    • مروری بر روش‌های استخراج ویژگی از سیگنال EEG
      • استخراج دستی ویژگی
      • استخراج خودکار ویژگی
      • استخراج ویژگی به کمک مدل‌های بنیادی سری زمانی
    • مروری بر روش‌های طبقه‌بندی سیگنال EEG
      • مدل‌های یادگیری ماشین برای طبقه‌بندی سیگنال EEG
      • معماری‌های یادگیری عمیق برای سیگنال EEG
    • جمع‌بندی
  • روش پیشنهادی
    • طراحی رویه آزمایش اخذ سیگنال EEG
      • بکارگیری تثبیت‌های زمانی
      • مقایسه مجموعه داده ارائه شده با سایر پژوهش‌ها
    • چارچوب پیش‌پردازش سیگنال EEG
    • چارچوب طبقه‌بندی دو مرحله‌ای
      • طبقه‌بندی بر اساس ویژگی‌های آماری و سیگنالی
      • طبقه‌بندی بر اساس ویژگی‌های استخراج شده از مدل بنیادی
    • چارچوب طبقه‌بندی ‌سرتاسر
    • ترکیب مدل‌های برتر با رویکرد رای اکثریت
    • بررسی مقاومت مدل‌های برتر
    • ارزیابی معتبر چارچوب‌های تشخیص هویت مبتنی بر EEG
    • جمع‌بندی
  • آزمایش‌ها
    • جمع آوری دادگان EEG مبتنی بر رویکرد تصور گفتار
      • شرکت کنندگان
      • اخذ دادگان
    • آماده‌ سازی و پیش‌پردازش دادگان
    • آزمایش‌های طبقه‌بندی دو مرحله‌ای
      • شناسایی هویت بر اساس ویژگی‌های دستی
      • شناسایی هویت بر اساس ویژگی‌های مدل بنیادی
    • آزمایش‌های طبقه‌بندی سرتاسر
    • ترکیب بهترین مدل‌های طبقه‌بند
    • بررسی عملکرد طبقه‌بند‌های برتر با کم کردن دادگان آموزش
    • سامانه تشخیص هویت نهایی
    • جمع‌بندی
  • جمع‌بندی و کار‌های آتی
    • جمع‌بندی
    • کارهای آتی
  • مراجع
  • واژه‌نامه
...see more