一种适合于大数据的并行坐标下降法
2014-06-03 23:43
465 查看
在机器学习中,模型的训练是一个很重要的过程,它通常是对一个目标函数进行优化,从而获取模型的参数,比较常见的优化算法包括梯度下降法、牛顿法与拟牛顿法等。但在大数据的背景下,尤其对于并行实现来说,优化算法通常是越简单越好,如坐标下降法(CD)和随机梯度下降法(SCG)就比较受欢迎。
本文是阅读完论文 Distributed Coordinate Descent Method for Learning with Big Data 后的一则笔记,主要介绍算法 Hydra (一种分布式坐标下降法)的算法框架、收敛性理论、参数选取和并行实现细节。作者: peghoty 出处: http://blog.csdn.net/itplus/article/details/28329603欢迎转载/分享, 但请务必声明文章出处.
相关文章推荐
- Hive数据分析——Spark是一种基于rdd(弹性数据集)的内存分布式并行处理框架,比于Hadoop将大量的中间结果写入HDFS,Spark避免了中间结果的持久化
- (转载)一种根据纠偏数据对火星坐标进行完美拟合的方法
- WebGIS中基于控制点库进行SHP数据坐标转换的一种查询优化策略
- 一种自动处理数据表的方法
- 一种新的穿透防火墙的数据传输技术
- 利用存储过程实现交叉表格式数据查询的一种通用方法
- 一种使用递归从数据库读取数据来动态建立菜单的方法
- (转载)一种新的穿透防火墙的数据传输技术
- JSP数据和JavaScirpt数据交互使用问题的一种解决方法
- [转]PHP之中使用共享内存进行高速数据更新的一种方案
- 一种新的穿透防火墙的数据传输技术
- 从游戏中得到动态内存数据(汇编+VC 例子:疯狂坦克的X坐标)
- 一种新的穿透防火墙的数据传输技术
- DNS一种新的穿透防火墙的数据传输技术
- CString 是一种很有用的数据类型
- [ZT]水晶报表数据填充(一种推模式,两种拉模式)类库
- [转贴]水晶报表数据填充(一种推模式,两种拉模式)类库
- 本文介绍了一种利用Repeater控件显示主-从关系数据表的方法。
- 一种把ACCESS的数据导入到MySQL中的方法
- 一种新的穿透防火墙的数据传输技术