神经网络入门基础知识 neural networks basics

也许现在提到深度学习（deep learning）连非计算机专业的人都听说过，尤其是最近“人机大战”更是掀起了人们对深度学习的极大关注。而深度学习则源于神经网络的研究。神经网络其实是一门相对古老的算法，它最初产生的目的是制造能够模拟这个星球最复杂的东西“人脑”的机器，但是神经网络的发展也是几经波折，下面引用周志华大牛《机器学习》书中对神经网络发展的介绍讲下背景知识：

第一个高潮期：二十世纪四十年代M-P神经网络模型、Hebb学习律出现后，五十年代出现了以感知机、Adaline为代表的一系列成果，可以看做是神经网络发展的第一个高潮。