شبکه عصبی نمایی (Exponential Neural Network)، در ریاضیات (Mathematics)
انواع شبکه های عصبی (Neural Networks) را در آموزش زیر شرح دادیم :
شبکه عصبی نمایی (Exponential Neural Network) :
شبکه عصبی نمایی (Exponential Neural Network) ممکن است به دو معنا به کار رود: (۱) شبکه ای که از توابع نمایی به عنوان تابع فعال سازی استفاده می کند (مثلا ELU که در آن بخش منفی به صورت نمایی است). (۲) شبکه ای که در آن وزن ها یا نرخ یادگیری به صورت نمایی تغییر می کنند. اما بیشتر به مورد اول اشاره دارد.
تابع فعال سازی نمایی (Exponential activation) مانند
\[ e^x \]به ندرت به تنهایی استفاده می شود (چون رشد سریع و نامحدود دارد). اما ترکیباتی مانند ELU (
\[ \alpha(e^x-1) \]برای
\[ x<0 \]) مفید هستند.
نویسنده علیرضا گلمکانی
شماره کلید 14362
گزینه ها 
نظرات 0 0 0