شبکه عصبی صفر-یک (Zero-One Neural Network)، در ریاضیات (Mathematics)

انواع شبکه های عصبی (Neural Networks) را در آموزش زیر شرح دادیم :

شبکه عصبی صفر-یک (Zero-One Neural Network) :

شبکه عصبی صفر-یک (Zero-One Neural Network) به شبکه ای اطلاق می شود که خروجی نهایی آن (یا خروجی هر نرون) به صورت دودویی (۰ یا ۱) است. این می تواند با تابع فعال سازی پله (step function) یا با نمونه گیری از توزیع برنولی (در شبکه های تصادفی) محقق شود. آموزش این شبکه ها به دلیل غیرمشتق پذیر بودن تابع پله دشوار است. روش های تقریبی مانند Gumbel-Softmax یا straight-through estimator استفاده می شود. این شبکه ها در مسائل یادگیری ساختاریافته و کوانتیزاسیون کاربرد دارند.