با توجه به مباحث بند ششم، در شبکه‏های تک لایه – بردار ورودی X توسط نرون‏ها را میتوان طبق رابطه ذیل نشان داد :

y = f ( W *X = b )

به بردار خروجی مرتبط می‏شود. این شبکه شکل ساده‏ای از شبکه‏های پیش‏خور است که مسیر پاسخ همواره رو به جلو پردازش می‏شود و به نرون‏های لایه ( لایه‏های قبل ) باز نمی‏گردد. اگر ایده شبکه‏های feed forward را به چند لایه تعمیم دهیم، هر لایه ماتریس وزن W و بردار ورودی X و بردار خروجی مختص خود را دارد.