高并发网站怎么搭建?数据库分表?
2015-07-14 14:36
489 查看
数据库的水平划分和垂直划分很早以前就接触了,只是没有实践,没有什么体会,只有最近两年才有接触,今天也和大家聊聊。
垂直划分
按照功能划分,把数据分别放到不同的数据库和服务器。
当一个网站开始刚刚创建时,可能只是考虑一天只有几十或者几百个人访问,数据库可能就个db,所有表都放一起,一台普通的服务器可能就够了,而且开发人员也非常高兴,而且信心十足,因为所有的表都在一个库中,这样查询语句就可以随便关联了,多美的一件事情。但是随着访问压力的增加,读写操作不断增加,数据库的压力绝对越来越大,可能接近极限,这时可能人们想到增加从服务器,做什么集群之类的,可是问题又来了,数据量也快速增长。
这时可以考虑对读写操作进行分离,按照业务把不同的数据放到不同的库中。其实在一个大型而且臃肿的数据库中表和表之间的数据很多是没有关系的,或者更加不需要(join)操作,理论上就应该把他们分别放到不同的服务器。例如用户的收藏夹的数据和博客的数据库就可以放到两个独立的服务器。这个就叫垂直划分(其实叫什么不重要)。
![](http://dl.iteye.com/upload/attachment/224720/afae64b0-b31c-398c-8688-e4c685116d54.png)
当博客或者收藏夹的数据不断增加后,应该怎么办,这样就引出了另外一个做法,叫水平划分。
水平划分
则把一个表的数据划分到不同的数据库,两个数据库的表结构一样。怎么划分,应该根据一定的规则,可以根据数据的产生者来做引导,上面的数据是由人产生的,可以根据人的id来划分数据库。然后再根据一定的规则,先获知数据在哪个数据库。
其实很多大型网站都经历了数据库垂直划分和水平的划分的阶段。其实这个可以根据经验来确定,不一定由某些硬性的规则。
以刚才的博客为例,数据可以根据userid的奇偶来确定数据的划分。把id为基数的放到A库,为偶数的放B库。
![](http://dl.iteye.com/upload/attachment/224943/fa8080ad-d0ed-3784-b95d-85f9969a7225.png)
这样通过userId就可以知道用户的博客的数据在哪个数据库。其实可以根据userId%10来处理。还可以根据著名的HASH算法来处理。
当初看手机之家的架构是发现他们是:
水平切分:对数据进行水平分割。
a.最好分到同一个数据库。
b.一种已经证明是切实可行的方案:主表+辅表。
c.有3种类型:主表不打散、主表打散无辅表、主表打散有辅表。
d.但对程序员来说,TA看到的只是一张表,不妨称之为虚表(逻辑表)? ,这张虚表实际上可能是由N张实表(物理表)组成的。
哈哈,我还是喜欢把数据分到不同的数据库,这个可以按照业务来和环境来定吧。
在说句题外话,如果是大型数据库,还可以做读写分离等。
垂直划分
按照功能划分,把数据分别放到不同的数据库和服务器。
当一个网站开始刚刚创建时,可能只是考虑一天只有几十或者几百个人访问,数据库可能就个db,所有表都放一起,一台普通的服务器可能就够了,而且开发人员也非常高兴,而且信心十足,因为所有的表都在一个库中,这样查询语句就可以随便关联了,多美的一件事情。但是随着访问压力的增加,读写操作不断增加,数据库的压力绝对越来越大,可能接近极限,这时可能人们想到增加从服务器,做什么集群之类的,可是问题又来了,数据量也快速增长。
这时可以考虑对读写操作进行分离,按照业务把不同的数据放到不同的库中。其实在一个大型而且臃肿的数据库中表和表之间的数据很多是没有关系的,或者更加不需要(join)操作,理论上就应该把他们分别放到不同的服务器。例如用户的收藏夹的数据和博客的数据库就可以放到两个独立的服务器。这个就叫垂直划分(其实叫什么不重要)。
![](http://dl.iteye.com/upload/attachment/224720/afae64b0-b31c-398c-8688-e4c685116d54.png)
当博客或者收藏夹的数据不断增加后,应该怎么办,这样就引出了另外一个做法,叫水平划分。
水平划分
则把一个表的数据划分到不同的数据库,两个数据库的表结构一样。怎么划分,应该根据一定的规则,可以根据数据的产生者来做引导,上面的数据是由人产生的,可以根据人的id来划分数据库。然后再根据一定的规则,先获知数据在哪个数据库。
其实很多大型网站都经历了数据库垂直划分和水平的划分的阶段。其实这个可以根据经验来确定,不一定由某些硬性的规则。
以刚才的博客为例,数据可以根据userid的奇偶来确定数据的划分。把id为基数的放到A库,为偶数的放B库。
![](http://dl.iteye.com/upload/attachment/224943/fa8080ad-d0ed-3784-b95d-85f9969a7225.png)
这样通过userId就可以知道用户的博客的数据在哪个数据库。其实可以根据userId%10来处理。还可以根据著名的HASH算法来处理。
当初看手机之家的架构是发现他们是:
水平切分:对数据进行水平分割。
a.最好分到同一个数据库。
b.一种已经证明是切实可行的方案:主表+辅表。
c.有3种类型:主表不打散、主表打散无辅表、主表打散有辅表。
d.但对程序员来说,TA看到的只是一张表,不妨称之为虚表(逻辑表)? ,这张虚表实际上可能是由N张实表(物理表)组成的。
哈哈,我还是喜欢把数据分到不同的数据库,这个可以按照业务来和环境来定吧。
在说句题外话,如果是大型数据库,还可以做读写分离等。
相关文章推荐
- 我的架构师梦想日记(重开)
- InitPHP框架搭建高可用WEB应用01
- 大话设计模式(十一 三层架构,分层开发)
- 让x86的android模拟器能模拟arm架构系统
- 技术社交以及技术人员互助网站
- 海量图片存储与运算架构
- LVS+Keepalived 网站服务群集
- LVS+Keepalived 网站服务群集
- 访问一个网站需要那几个协议?
- 网曝CNZZ统计工具疑似出卖用户数据
- 网站数据分析工具一览表
- 关于WCF服务的使用(非常详细的步骤)
- 浅谈图片服务器的架构演进
- 6月钓鱼网站简报:新网占比高达72% 蝉联第一
- 阿里云服务器部署架构
- 项目实战之中小网站数据缓存的设计与实现
- 利用AVFoundation定制个性化音视频播放
- 百度下半年惩罚网站的低质量,坏消息到来硕士
- log4j教程 3、架构
- 网站赚钱高手:一个人运营发展12年赚了5亿多美元