اصطلاح advanced

پس‌انتشار | Backpropagation

الگوریتم محاسبه گرادیان تابع خطا نسبت به تمام وزن‌های شبکه از طریق قانون زنجیره مشتق.

Backpropagation — پس‌انتشار | Backpropagation

الگوریتم محاسبه گرادیان تابع خطا نسبت به تمام وزن‌های شبکه از طریق قانون زنجیره مشتق.

تعریف

الگوریتم محاسبه گرادیان تابع خطا نسبت به تمام وزن‌های شبکه از طریق قانون زنجیره مشتق.

توضیح کامل

در فاز رو‌به‌جلو (Forward pass) خروجی محاسبه می‌شود؛ در فاز برگشتی (Backward pass) گرادیان از خروجی به ورودی منتشر می‌شود. این الگوریتم محاسبه کارآمد گرادیان‌ها را از $O(n^2)$ به $O(n)$ کاهش می‌دهد. پایه ریاضی تمام آموزش شبکه‌های عصبی است.

مثال کاربردی

با هر خطای پیش‌بینی، مقصر بودن هر وزن مشخص می‌شود و وزن‌ها متناسباً تنظیم می‌شوند.

موارد مرتبط

نمونه‌برداری تاپ-پی | Top-p (Nucleus) Sampling
اصطلاح
یادگیری زیرو‌شات | Zero-shot Learning
اصطلاح
فراخوانی تابع | Function Calling
اصطلاح
پنجره زمینه | Context Window
اصطلاح