1 概述

传统的线性模型（$y=w^Tx+b$）没有办法刻画两个分量之间的相互联系。神经网络模型通过拓展 $x$ 的线性模型来刻画其非线性关系。

理想的激活函数是阶跃函数，但是由于不光滑、不可导，实际使用 Sigmoid 函数。

本文阅读量