بسم الله الرحمن الرحیم
با سلام
راجع بهregularization توضیحات جالبی در اسلایدهای دکتر شیری دیدم که ترجیح دادم اینجا قرار دهم.
- برای غلبه بر مشکل over fitting در هنگام استفاده از روش کمترین خطا اضافه کردن جمله رگولاسیون به عبارت خطا می باشد.
2.jpg
- همانطور که دیدیم هنگام بروز over fitting ضرایب چند جمله ای خیلی بزرگ می شدند. حال اگر مدل هائی که دارای ضرایب بزرگ هستند به نوعی جریمه شوند سیستم یادگیر از انتخاب آنها پرهیز خواهد نمود.
- جمله جریمه مناسب به عنوان ترم رگولاسیون به عبارت خطا اضافه میشود. ضریب لاندا اهمیت نسبی جمله رگولاسیون را مشخص میکند.
Bookmarks