Альтернатива
Іншим способом вирішення нелінійних задач без використання декількох шарів є використання мереж більш високого порядку (блок сігма-пі). У мережі цього типу кожен елемент вхідного вектора розширюється кожної попарної комбінацією помножених входів (другий порядок). Це може бути розширено до мережі n-порядку. Персептрон – це дуже гнучка річ.
Однак слід пам’ятати, що найкращим класифікатором необов’язково є той, який точно класифікує всі тренувальні дані. Дійсно, якщо б у нас було попереднє обмеження на те, що дані надходять з одно-варіативних гаусівських розподілів, лінійне поділ у вхідному просторі є оптимальним, а нелінійне рішення перевизначено.
Інші алгоритми лінійної класифікації включають в себе Winnow, опорний вектор і логістичну регресію. Персептрон – це універсальний набір алгоритмів.
