• چکیده (6)
• فهرست جدول‌ها (9)
• فهرست شکل‌ها (10)
• فهرست نمودارها (12)
• 1 فصل اول: مقدمه و معرفی موضوع (14)
  • 1˗1. انگیزه‌های تحقیق (15)
  • 1˗2. معرفی سامانه هوشمند تهویه‌مطبوع ساختمان و تعریف مسئله (16)
  • 1˗3. مروری بر ادبیات موضوعی (17)
    • 1˗3˗1. روش‌های کنترلی برای سیستم‌های سرمایش و گرمایش (17)
    • 1˗3˗2. روش‌های مبتنی بر یادگیری تقویتی عمیق (20)
    • 1˗3˗3. مزایای استفاده از یادگیری تقویتی عمیق (28)
  • 1˗4. نوآوری‌های پایان‌نامه (29)
  • 1˗5. ساختار پایان‌نامه (30)
• 2 فصل دوم: معرفی یادگیری تقویتی و مفاهیم فرایادگیری تقویتی (31)
  • 2˗1. معرفی یادگیری تقویتی (32)
    • 2˗1˗1. مدل‌سازی ریاضی و معرفی روش یادگیری ارزش (33)
  • 2˗2. معرفی روش یادگیری تقویتی نقاد-کنشگر نرم69F (35)
    • 2˗2˗1. معرفی ساختار نقاد-کنشگر (35)
    • 2˗2˗2. جزئیات روش SAC (35)
  • 2˗3. معرفی روش‌های فرایادگیری تقویتی87F (42)
• 3 فصل سوم: کنترل بهینه سیستم سرمایش و گرمایش با یادگیری تقویتی عمیق (46)
  • 3˗1. تعریف مسئله و متغیرها (47)
  • 3˗2. مراحل طراحی کنترل‌کننده (روش‌شناسی) (50)
    • 3˗2˗1. طراحی فضای حالت، اقدام و تابع پاداش (52)
    • 3˗2˗2. ساختار شبیه‌سازی مدل یادگیری تقویتی (58)
    • 3˗2˗3. کنترل‌کننده مبنا113F (60)
    • 3˗2˗4. معیارهای ارزیابی عملکرد مدل یادگیری تقویتی (60)
  • 3˗3. افزودن عمومیت‌یافتگی و انتقال‌پذیری به مدل یادگیری تقویتی (61)
  • 3˗4. جمع‌بندی (62)
• 4 فصل چهارم: شبیه‌سازی و نتایج (63)
  • 4˗1. شرایط شبیه‌سازی (64)
    • 4˗1˗1. بستر شبیه‌سازی (64)
    • 4˗1˗2. هایپر پارامترها (66)
  • 4˗2. شبیه‌سازی و نتایج (68)
    • 4˗2˗1. بررسی نتایج شبیه‌سازی کنترل‌کننده‌های مختلف در مقایسه با یکدیگر و ارزیابی عملکرد آن‌ها در ساختمان جدید (68)
    • 4˗2˗2. بررسی جزئیات مدل یادگیری تقویتی از نظر وضعیت حضور، کنترل دما و متغیرهای نهان (77)
    • 4˗2˗3. ارزیابی بهبود عملکرد کنترل‌کننده پس از یادگیری در ساختمان جدید (83)
    • 4˗2˗4. ساختار پیاده‌سازی کنترل‌کننده هوشمند در محیط واقعی (84)
• 5 فصل پنجم: جمع‌بندی، نتیجه‌گیری و ارائه پیشنهادها (85)
• فهرست مراجع (88)