欢迎光临 x-algo
关注算法在工业界应用
Hi, 这是一个关注大数据算法在工业界应用的网站

leihao的文章

第4页
图像

OverFeat介绍

leihao阅读(2376)评论(0)

2013年底论文OverFeat: Integrated Recognition, Localization and Detection using Convolutional Networks 本论文介绍了一个基于卷积的框架,用来集成的处...

CNN

VGG结构介绍

leihao阅读(11791)评论(0)

原始论文:VGG 整体结构 上图来自这里 预处理 图片的预处理就是每一个像素减去了均值,算是比较简单的处理。 卷积核们 整体使用的卷积核都比较小(3x3),3x3是可以表示「左右」、「上下」、「中心」这些模式的最小单元了。 3 × 3 wh...

CNN

AlexNet介绍

leihao阅读(3671)评论(0)

这篇文章是对论文imagenet-classification-with-deep-convolutional-neural-networks的一篇个人笔记。 由于CNN特殊的结构,相比于全连接的网络CNN有更少的参数,所以更加容易训练;并...

CNN

GoogLeNet介绍

leihao阅读(5602)评论(1)

 单模型效果 比赛排名 图片来源:http://www.qingpingshan.com/m/view.php?aid=143436 Inception v1 目标 人类的大脑可以看做是神经元的重复堆积,Inception网络存在的原因就是...

CNN

深度残差网络

leihao阅读(2284)评论(0)

现状 在实际中,发现网络的深度和模型的性能(效果)并非一直是正相关的关系,导致这个问题的可能原因: 很有可能是梯度消失/爆炸引起的 新加的层表达能力有限,对前面几层学好的模型是一种损害,所以可能存在一个「最优层数」。(作者倾向这个原因) 为...

调度系统

Borg介绍

leihao阅读(533)评论(0)

功能 Google的Borg系统是一个集群管理软件,实现下面三个功能 隐藏对集群资源管理、失败处理的细节,让开发者更加关注自己的程序本身 高可靠和可用 更方便的在多机器上面运行job(程序/服务)   两类作业 我们在集群上面运行...

模型

GBDT快速计算可以想到的

leihao阅读(814)评论(0)

优化树的存储 速度想要提升,将树存成数组是比较好的选择,所以可以构造一个大数组存放树中的节点,然后用另外一个int数组表示root的下标即可,下图为一个存储实例: 上图中,数组存储是按照层次存储了,其实可以根据叶子节点上面的「样本量」进行调...

最优化

rabit和ps-lite

leihao阅读(1388)评论(0)

随便写一点吧,这几天大概了解了一下DMLC的两个参数服务器,rabit和ps-lite。很早之前接触过vw,所以对AllReduce的工作模式并不陌生,专门优化神经网络的parameter server也大概了解,不过看到具体说明文档和论文...

数学

特征值和特征向量

leihao阅读(841)评论(0)

通过本文,可以更加好的理解特征值的「物理」意义,以及为什么研究特征值和特征向量。 不变子空间 「算子」是一个向量空间到其自身的线性映射,此映射记为: \(L(V)=L(V,V)\) 。为了更好地理解算子,先定义一下直和分解: 设 \(T \...

关注大数据算法在工业界应用

本站的GitHub关于本站