神经单元
2016-04-10 12:59
316 查看
闲来无聊,决定写一下最近的学习笔记,先从最简单的神经单元讲起。
什么是神经单元?
神经单元就是一个计算单元,初学者可以把它理解为一个简单的函数,我从网上截了一张图:
其中x1,x2,x3为神经单元的输入,w1,w2,w3位神经单元的权重,b为神经单元的偏置,神经单元的输出为
;其中f为激活函数;
这就是一个简单的神经单元结构;
现在假设我们需要用神经单元写一个与门的函数,则可设置如下:
输入个数为2,w1 = 1,w2 = 1,b = 0;f为一个判别器,即:当y>=1,f(y) = 1;当y<1,f(y)=0;如下图:
则x1 = 0,x2 = 0,输出为0,其他输出为1;既实现了与门的功能。
什么是神经单元?
神经单元就是一个计算单元,初学者可以把它理解为一个简单的函数,我从网上截了一张图:
其中x1,x2,x3为神经单元的输入,w1,w2,w3位神经单元的权重,b为神经单元的偏置,神经单元的输出为
;其中f为激活函数;
这就是一个简单的神经单元结构;
现在假设我们需要用神经单元写一个与门的函数,则可设置如下:
输入个数为2,w1 = 1,w2 = 1,b = 0;f为一个判别器,即:当y>=1,f(y) = 1;当y<1,f(y)=0;如下图:
则x1 = 0,x2 = 0,输出为0,其他输出为1;既实现了与门的功能。
相关文章推荐
- CUDA搭建
- 稀疏自动编码器 (Sparse Autoencoder)
- 白化(Whitening):PCA vs. ZCA
- softmax回归
- 卷积神经网络初探
- 如何用70行代码实现深度神经网络算法
- 近200篇机器学习&深度学习资料分享(含各种文档,视频,源码等)
- 图像识别和图像搜索
- 卷积神经网络
- 深度学习札记
- 图像智能打标签‘神器’-AlchemyVision API
- 10 个值得一试的开源深度学习框架
- ubuntu theano 安装成功,windows theano安装失败
- 【Deep learning vs BPL】思考:complex => simple => rich
- 卷积神经网络知识要点
- 1.linear Regression
- 1.linear Regression
- SURF项目总结 - deepdream
- Deep learning: autoencoders and sparsity