海量数据,数据挖掘,数据存储方法
2011-02-22 23:50
288 查看
现在对网络服务来讲,用户量是非常大的,用户信息或者其他数据也是非常巨大的,如何对海量数据进行存储,进行挖掘,进行筛选等问题,对服务器的响应效率来讲影响很大,关键要设计出良好的数据结构来存储,有良好的算法才好
一般提供下面几个解决方案:
Bloom Filter
Hash
Bit-Map
Heap
双层桶划分
数据库索引
倒排索引(Inverted Index)
外排序
Trie树
MapReduce
关于这些算法的详细介绍
可以参看这篇文章,写的很不错
http://blog.redfox66.com/category/e6b5b7e9878fe695b0e68dae.aspx
本文出自 “xiesiyuana的博客” 博客,请务必保留此出处http://seanyxie.blog.51cto.com/1319339/1375896
一般提供下面几个解决方案:
Bloom Filter
Hash
Bit-Map
Heap
双层桶划分
数据库索引
倒排索引(Inverted Index)
外排序
Trie树
MapReduce
关于这些算法的详细介绍
可以参看这篇文章,写的很不错
http://blog.redfox66.com/category/e6b5b7e9878fe695b0e68dae.aspx
本文出自 “xiesiyuana的博客” 博客,请务必保留此出处http://seanyxie.blog.51cto.com/1319339/1375896
相关文章推荐
- 海量数据,数据挖掘,数据存储方法
- SQL Server存储图像数据的策略与方法
- ExtJS的使用方法汇总(7)——数据存储与传输
- 学习大数据第二天:数据挖掘的基础方法——最小二乘法
- iOS数据存储的各种方法集合
- MySQL存储大数据报错的解决方法
- 数据挖掘中的抽样方法--简单记录
- 量化投资数据挖掘及其相关方法
- 海量数据挖掘MMDS week2: 频繁项集挖掘 Apriori算法的改进:非hash方法
- 数据挖掘的十种分析方法
- 人工智能大数据,公开的海量数据集下载,ImageNet数据集下载,数据挖掘机器学习数据集下载
- 数据挖掘和知识发现的技术、方法及应用
- 使用jQuery的data方法来为页面中的某个元素存储数据,(获取焦点,清除默认值)
- Mac下使用navicat软件存储数据乱码的解决方法
- 数据挖掘、数据分析、海量数据处理的面试题(总结july的博客)
- Nand Flash数据存储规则与数据读写方法一二三
- float数据在内存中的存储方法
- mysql 5.7更改数据库的数据存储位置的解决方法
- 数据挖掘方法案例介绍
- 【学堂在线数据挖掘:理论方法笔记】第二天(3.18)