机器学习（15）
卷积神经网络
CNN是一个从生物启发而创建出来的一个多层神经网络，它是hubel 和wiesel共同搞定的。我们知道视觉皮层包含一个复杂的细胞排列。这些细胞对子区的视觉区域比较敏感，叫做易接受区域。这些细胞在这些输入空间上扮演了一个本地过滤器的角色，并且在自然图像上是一个非常适合强空间本地纠正的。
另外，两个基本细胞类型已经被证实了：简单细胞在他的可接受区域负责最大化的去描述物体的边的模式。复杂细胞有更大的区域，来表达模式的具体位置。
动物视觉皮层成为最强大的视觉处理系统。它看起来自然的去模拟它的行为。因此，许多模生模型可以被发现。
CNN通过强迫一个在临近区域的神经元上之间的本地连接，来进行本地空间纠正。换句话说，隐藏层的输入来自于下层的一个子集。我们可以用下图来展示一下。
在上图中，m-1层就是输入的视网膜，m层的细胞有一个3个宽度的输入层，从临近的视网膜层。m+1层有相同的情况。我们说他们的对输入层的可接受区域对于下层的是3,但是对于输入层的区域是5.每一个单元不负责响应外边视网膜层，这样的架构，保证 学习得到的过滤器可以产生对本地输出模式来说最强的响应。
就像上面展示的那样，通过堆叠很多层，导致了过滤器成为了一个渐进式的全局（ie.向更大的区域像素响应）。举个例子，隐藏层m+1的单元可以编码一个宽度为5的非线性特征
共享的权重
另外，在CNNS，每一个FILTERs Hi 是从整个视觉区域被复制的。这些复制的单元共享相同的参数（权重和偏移）并且形成了一个特征映射。如下图：
在上面的图片中，我们看到3个隐藏的单元属于同一个特征映射MAP。相同颜色的权重是共享的，要求必须是相同的。通过一个对原始算法的一个小的改动，梯度下降法，也可以学习这样的共享参数。共享权重的梯度仅仅是共享参数的梯度的总和而已。
用这种方式复制这些单元，允许我们无视视觉的位置就可以探测到特征参数。 另外通过大幅度的减少要学习的自由参数个数，并共享权重的手段，提高了学习效率。模型中的这些促使CNNS在视觉问题上能够达到更好的泛化效果。
细节和符号
一个特征map是通过重复的对整个图片的一个子区域应用一个函数来得到的，换句话说，通过对输入图片的线性过滤器的卷积，加上偏移将他们变为非线性的函数。如果我们对在给定的K层的第k个特征MAP称做hk,
它的过滤器由权重wk和偏移bk组成，这样的特征MAP hk，是通过下面的方法获得的：
为了形成一个对数据更丰富的表达，每一个隐藏层由多个特征MAP来组成{h(k),k=0…k}.隐藏层的权重W可以用一个4D的tensor来表达， 它包含每个目标特征MAP的所有组合， 源特征MAP，源垂直位置，源水平位置。 偏移B可以用一个向量来表达，该向量里面，每一个目的特征MAP对应一个元素。我们可以用画图来表达：
上图表达了两个层。 层m-1包含了四个特征MAP。
隐藏层 m包含了两个特征MAP，（H0,和h1）.
h0 和h1（蓝色和红色的）中的像素(神经元输出的)是从m-1层的像素计算出来的，它是在它的下方2x2的可接受区域里面的（标志颜色的巨型）。注意下，可接受区域如何跨跃四个输入特征MAP的。h0的权重W0, h1的权重W1是一个3D的权重tensors。
引导唯独索引，输入特征MAP，以及另外两个的像素坐标。
我们综合起来看下
，w(ij)(kl) 表示出了m层第k个特征map中连接每个像素的权重， 像素的坐标是(i,j),
并且，它是m-1层的第l个特征map。
ConvOp是theano中实现卷积层的主要马力。
它通过conv2d来使用，conv2d有两个形参。
一个相对于一个迷你批次中的输入图形的4d tensor. 这个tensor的形状如下【迷你批次大小，输入特征的MAP个数，图片的高度，图片的宽度】
另一个是相对与权重矩阵W。 它的形状是【m层的特征MAP个数，m-1层的特征map个数，过滤器的高度，过滤器的宽度】
下面是实现一个卷积网络层的的teano代码.这个输入有120x160的大小的3个特征map组成（RGB）。 我们用两个（9x9的可接受区域）卷积过滤器。
参考知识库
* 以上用户言论只代表其个人观点，不代表CSDN网站的观点或立场
访问：24322次
排名：千里之外
原创：46篇
(1)(2)(2)(2)(2)(6)(1)(1)(2)(1)(12)(5)(1)(1)(1)(4)(3)&主题：外置磁盘阵列求推
泡网分: 9.949
注册: 2008年10月
因为考虑到win和mac兼容，一直以来用的是NAS，最近考虑到各类照片、素材的迅速膨胀，考虑4盘位左右的阵列
最好是同时具备usb3和雷电口， 翻遍网络，目前似乎就promise和ARECA 空箱价格大概5k，价格似乎比较尴尬，毕竟1k多能买一块不错的阵列卡了，这么算下来成本相对于自制NAS反而更高
微信扫一扫分享
&浏览：1643&&回帖：63 &&
泡网分: 29.176
注册: 2002年05月
楼主可以考虑一下HP Microserver Gen8，能接4块硬盘，USB 3.0/千兆网卡，关键是体积小，功耗低，噪音小。能够Windows系统或者群辉，本身就是个完整功能的服务器。
泡网分: 32.213
帖子: 5311
注册: 2002年08月
外娇里嫩 发表于
老老实实弄个NAS，千兆口即可。我是想在上面建itunes库，所以nas办不到的，群晖的nas我有了！
本帖由安卓客户端发布
泡网分: 33.214
帖子: 2301
注册: 2003年05月
yygzs_52 发表于
继续求推荐老老实实弄个NAS，千兆口即可。
泡网分: 32.213
帖子: 5311
注册: 2002年08月
继续求推荐
本帖由安卓客户端发布
泡网分: 32.213
帖子: 5311
注册: 2002年08月
也想上外置磁盘阵列，看来看去除了山寨，就是高大贵，另外就是铁威马，看上去像假洋鬼子，另外看中一个台湾产的Promise牌子，有个型号叫Promise SmartStor DS4600 ，但是这个好像是2010年的产品了，难道阵列没有技术进步的，不知道有用过的吗！！其他有没有推荐的，先谢过了！！！
泡网分: 31.225
帖子: 15039
注册: 2008年11月
偶正在转让LaCie 二盘位 Thunderbolt Series 2-disk RAID 4T 雷电4TB
泡网分: 0.329
帖子: 1331
注册: 2012年11月
dispatchwq 发表于
不是，专用系统直接装。
这是我组NAS的帖子：
开始装的是WINDOWS 和 硬RAID，后来RAID卡出了问题，正好看到狼7玩esxi + 群辉，学着他折腾的。
曾在丝路发过安装esxi和群辉的详细贴子，结果被删了ID，不想再发了。
你坛子里找狼7的贴子吧，里面有详细的步骤。明白了，万分感谢您不厌其烦的回答。
泡网分: 1.826
帖子: 1505
注册: 2013年02月
有前途好职业 发表于
哦。准备参考你的方案装
另外exsi是基于windows安装的？不是，专用系统直接装。
这是我组NAS的帖子：
开始装的是WINDOWS 和 硬RAID，后来RAID卡出了问题，正好看到狼7玩esxi + 群辉，学着他折腾的。
曾在丝路发过安装esxi和群辉的详细贴子，结果被删了ID，不想再发了。
你坛子里找狼7的贴子吧，里面有详细的步骤。
本帖最后由 dispatchwq 于
17:38 编辑
泡网分: 0.329
帖子: 1331
注册: 2012年11月
dispatchwq 发表于
exsi是底层，不需要与虚拟操作系统进行数据交互。
我指的是各虚拟系统之间的数据交换。哦。准备参考你的方案装
另外exsi是基于windows安装的？ 本帖最后由 有前途好职业 于
16:07 编辑
泡网分: 1.826
帖子: 1505
注册: 2013年02月
有前途好职业 发表于
虚拟机windows的数据-群辉，群辉-exis，exis-windows之间效率都也很高？exsi是底层，不需要与虚拟操作系统进行数据交互。
我指的是各虚拟系统之间的数据交换。
泡网分: 0.329
帖子: 1331
注册: 2012年11月
PowerPCG5 发表于
1U服务器噪音轰天，2U机器声动小区，千万不要尝试，哈哈。有车库可以放车库可以考虑
泡网分: 0.329
帖子: 1331
注册: 2012年11月
dispatchwq 发表于
相当于单机硬盘互拷，效率极高。瓶颈是虚拟机的系统和硬盘。虚拟机windows的数据-群辉，群辉-exis，exis-windows之间效率都也很高？
泡网分: 1.826
帖子: 1505
注册: 2013年02月
PowerPCG5 发表于
1U服务器噪音轰天，2U机器声动小区，千万不要尝试，哈哈。除非家住别墅，准备建家用数据中心，否则买这种1U的垃圾货纯找罪受。
泡网分: 1.826
帖子: 1505
注册: 2013年02月
有前途好职业 发表于
互相间传数据效率咋样？相当于单机硬盘互拷，效率极高。瓶颈是虚拟机的系统和硬盘。
泡网分: 31.225
帖子: 15039
注册: 2008年11月
xaxl 发表于
这家伙好便宜啊，1U服务器噪音轰天，2U机器声动小区，千万不要尝试，哈哈。
泡网分: 0.329
帖子: 1331
注册: 2012年11月
dispatchwq 发表于
BT、电驴可以，百度云没用过。
据说也支持迅雷。
我是搭了台NAS，跑EXSi，再虚拟群辉、WINDOWS等系统，一机多用。互相间传数据效率咋样？
泡网分: 1.826
帖子: 1505
注册: 2013年02月
有前途好职业 发表于
电驴，百度云什么的，是不是群辉上不能运行？如果这样，那数据就只能从windows搬到群辉。BT、电驴可以，百度云没用过。
据说也支持迅雷。
我是搭了台NAS，跑EXSi，再虚拟群辉、WINDOWS等系统，一机多用。
泡网分: 0.329
帖子: 1331
注册: 2012年11月
dispatchwq 发表于
可以，但效率低，实用不建议。电驴，百度云什么的，是不是群辉上不能运行？如果这样，那数据就只能从windows搬到群辉。
泡网分: 1.826
帖子: 1505
注册: 2013年02月
有前途好职业 发表于
谢谢，懂了。如果windows上建虚拟机，虚拟机运行群辉，windows可以访问群辉SHR里的数据吗？可以，但效率低，实用不建议。
泡网分: 0.329
帖子: 1331
注册: 2012年11月
dispatchwq 发表于
SHR类似RAID 5，但扩容更容易，而且可以用不同容量的盘组。
我重组过一次，没问题。就算重组失败，也可以把资料复制后再新建。谢谢，懂了。如果windows上建虚拟机，虚拟机运行群辉，windows可以访问群辉SHR里的数据吗？
泡网分: 1.826
帖子: 1505
注册: 2013年02月
有前途好职业 发表于
用黑群晖的SHR可以住raid5吗？重组的是时候会不会也出问题？SHR类似RAID 5，但扩容更容易，而且可以用不同容量的盘组。
我重组过一次，没问题。就算重组失败，也可以把资料复制后再新建。 本帖最后由 dispatchwq 于
14:28 编辑
泡网分: 0.329
帖子: 1331
注册: 2012年11月
dispatchwq 发表于
硬RAID多了卡的故障，坏盘时数据重建可能会失败，专业修复费用贵。
普通硬RAID卡如果碰到写入时断电会很惨，而带电池的硬RAID卡价格太贵，不适合家庭用。
软RAID少了卡的故障，其实是提高了可靠性，就算碰到重建出错，你也有更多的机会修复或重建RAID数据。
软RAID的缺点是性能，用WINDOWS组软RAID，一般只能达到20-30M/s的写入，50M左右的读取速度。
用FREENAS的ZFS组RAID-Z，大文件读写性能不错，一般可以达到100M/s的读写，但小文件随机读写性能很烂，用SSD做CACHE也没有太大的提高，个人感觉不适合家用。
用黑群晖的SHR组RAID，在G1610/4M内存3个2T硬盘的配置下，可以达到50M/s的写入，80-100M/s的读取性能，一般家用足够了。重组的性能也还行，在上述配置情况下，5小时就完成了。如果追求可靠，可以买一个现成的群辉NAS，如果要性价比，自己DIY个黑群晖，参考狼7的贴子。用黑群晖的SHR可以住raid5吗？重组的是时候会不会也出问题？
泡网分: 5.202
帖子: 5808
注册: 2012年01月
心若浮云 发表于
服务器都弄上的话，也就是软件系统安装设置问题，没硬件什么事了。费电、噪音真受不了，网上一堆二手服务器很便宜
L5520*2基本可以秒杀不超频的I7 3770K
服务器主板 L5520*2 不超频 数据来源于CineBench R11.5 64bit 测试
HP DL180 G6 2U&&￥1XXX
CPU: L5520*2颗（2.26GHz 、8M&&每颗CPU为4核心，8线程 5520*2就为8核心16线程且均为正式版）
内存：DDR3 ECC 10600R&&1333 4G *6根（共12根插槽）
硬盘：无 （硬盘*14 单片支持3T 最多14盘位支持48T支持SAS/SATA/SSD）
阵列卡: HP 3081E 或 HP P410 阵列卡+512M缓存+电池!&&6Gb/s 阵列卡 （支持RAID 0、1、5、6、10&&阵列模式）
电源：750W高效冗余电源*2个
网卡：主板集成NC362i 双端口千兆网卡 1000MB*2
远程：支持远程管理
这家伙好便宜啊，
泡网分: 1.826
帖子: 1505
注册: 2013年02月
有前途好职业 发表于
详细说说。还有性能差距大吗？硬RAID多了卡的故障，坏盘时数据重建可能会失败，专业修复费用贵。
普通硬RAID卡如果碰到写入时断电会很惨，而带电池的硬RAID卡价格太贵，不适合家庭用。
软RAID少了卡的故障，其实是提高了可靠性，就算碰到重建出错，你也有更多的机会修复或重建RAID数据。
软RAID的缺点是性能，用WINDOWS组软RAID，一般只能达到20-30M/s的写入，50M左右的读取速度。
用FREENAS的ZFS组RAID-Z，大文件读写性能不错，一般可以达到100M/s的读写，但小文件随机读写性能很烂，用SSD做CACHE也没有太大的提高，个人感觉不适合家用。
用黑群晖的SHR组RAID，在G1610/4M内存3个2T硬盘的配置下，可以达到50M/s的写入，80-100M/s的读取性能，一般家用足够了。重组的性能也还行，在上述配置情况下，5小时就完成了。如果追求可靠，可以买一个现成的群辉NAS，如果要性价比，自己DIY个黑群晖，参考狼7的贴子。
泡网分: 0.329
帖子: 1331
注册: 2012年11月
dispatchwq 发表于
其实家用软RAID更安全，用群辉的SHR性能也不错，硬RAID出问题的概率更高。详细说说。还有性能差距大吗？
泡网分: 1.826
帖子: 1505
注册: 2013年02月
其实家用软RAID更安全，用群辉的SHR性能也不错，硬RAID出问题的概率更高。
泡网分: 23.498
帖子: 3124
注册: 2005年11月
oxygenboy 发表于
2.5寸因为针对笔记本的& &卡顿门似乎每一个品牌都存在&&我想这是阻碍2.5寸盘成为本地存储的最大障碍只要把各种节电功能关掉，每个品牌都不存在这个问题
泡网分: 9.949
注册: 2008年10月
rodneylin 发表于
我查了一下，移动硬盘大概1099，单独硬盘是950左右！另外，应该是5900转！
主要我考虑静音的问题，同样7200转，2.5和3.5的差别大吗？2.5寸因为针对笔记本的& &卡顿门似乎每一个品牌都存在&&我想这是阻碍2.5寸盘成为本地存储的最大障碍
泡网分: 26.893
注册: 2004年01月
rodneylin 发表于
我查了一下，移动硬盘大概1099，单独硬盘是950左右！另外，应该是5900转！
主要我考虑静音的问题，同样7200转，2.5和3.5的差别大吗？我買的時候是半年前特價。當時單獨硬盤也過千元，移動硬盤特價七八百。
不好意思，我搞錯了轉速！
當然3.5的聲音大，但作為長期存儲，2.5的穩定性不台好吧？
泡网分: 9.949
注册: 2008年10月
rollca 发表于
raid0和raid1的话，软件raid和硬件raid差别不大，但是raid5，6乃至raid0+1等这些就差别大了去了，尤其某天你不幸掉盘后，软件raid的恢复重建的时间会把你急死～我用了快1年多了，误操作掉过一次盘，18T的空间，重建花了6个小时，要是软件raid的话，哭去吧。。。
星腾有雷电接口的，我觉得raid磁盘柜的话，千万别省钱，出了问题是啥钱都搞不定了。谢谢宝贵经验， 其实对个人而言 USB3.0 或者雷电& &关系不是特别大， 也许还是USB3更灵活一些， 但究竟是软raid还是硬raid ，厂家都讳莫如深，对于看不到实物的情况下，只能傻傻的通过价格来分辨 本帖最后由 oxygenboy 于
23:44 编辑
&版权所有：&&桂ICP备号&增值电信业务经营许可证}