细说五层网站架构,了解我们的网站压力究竟在哪里? | 张戈博客

  • 时间:
  • 浏览:3

目前网站架构一般分成网页缓存层、负载均衡层、 WEB层和数据库层,我真是一般都有多加一层,即文件服务器层,没有 大伙在后边的讨论过程中,大伙还可以依次用这五层对网站架构来进行讨论;这里为了更具有说服力,我将用有一一六个并发较大的生产环境来说明下,有一一六个是我现在维护的电子商务网站(并发最大峰值2900,日PV800万左右)、我目前维护的电子广告网站(并发最大峰值800,日PV80万左右)、没有 维护的大型CDN门户广告网站(并发最大峰值8000,日PV8000万左右)。  

网页缓存层  

首先说下好多好多 网页缓存层,比如CDN租赁(效果比公司好多好多 人部署Squid/Varnish要好,大伙专业,价格低廉,比如快网/CC等(价格80元/M/月不到)然后覆盖的城市更多),好多好多 人架设squid/Varnish是次选。另外,好多好多 大伙喜欢尝试自建CDN,好多好多 是有一一六个比较吃力不讨好的活儿,之好多好多 能达到预期目标,这块系统架构师在架设网站初期都有规划好,之好多好多 等到网站流量及压力巨大时才去规划。事实上,好多好多 层有好多好多 优

秀的开源软件都能胜利,比如传统的Squid Cache,另外,后起之秀Nginx和Varnish不可能 性能优异,不多的大伙尝试在好多好多 人的网站使用大伙作为好多好多 人的网页缓存,事实上,Nginx不可能 具备Squid所拥有的Web缓存加速功能,此外,Nginx对多核CPU的利用,胜过Squid不少,现在没有来的架构师都喜欢将Nginx一起去作为“负载均衡服务器”与“Web缓存服务器”来使用,大伙还可以根据好多好多 人网站的具体情况,来决定究竟使用哪种软件来作为好多好多 人网站的网页缓存。

负载均衡层  

首先说下负载均衡层,大伙熟悉的硬件/软件技术有F5,LVS/HAProxy,还有Nginx,它们的性能都有非常优异的,F5/LVS现在在全世界范围内的应用,然后淘宝现在升级架构,也将LVS取代了F5,HAProxy不可能 大伙都有有点痛 熟悉,但HAproxy+Keepalived确真是生产环境下表现优异,强大的吞吐能力,稳定性比之

硬件过尤不及,并用淘宝也在大规模的推广使用HAProxy,有兴趣的大伙也还可以关注。再说下Nginx,我是将Nginx+Keepalived架构用于了各种生产环境中的,经过长时间的线上观察,发现Nginx作为负载均衡器/反向代理也很稳定,不可能 并发压力过大,大伙前面还可以用F5/LVS作为最前端的负载均衡,而将Nginx作为七层代理,没有 的效果真是也不我差,好多好多 负载均衡层的压力不到是否有点痛 大。

WEB层  

WEB层这块压力比较大的网站现在都加上了Nginx作为WEB应用服务器,事实上,它的抗并发能力真是超过了预期;我现在维护的一家门户网站,高峰期时某台Nginx应用服务器的并发达到了一万以上,但Nginx也很负责和稳定的提供服务,在实际的生产环境中,不可能 大伙考虑到后端的数据库服务时,一万并发应该也不我是有一一六个比较大的数值了。另外,Linux集群有有一一六个优势,也不我它的高扩展性,就算大伙的网站的并发有一万以上,大伙后端的WEB服务是Apache,大伙多加几台 Apache服务器即可,在实际的线上维护时,大伙发现,高峰期间,实际上每台WEB的并发之好多好多 是否有点痛 大,好多好多 网站的压力在好多好多 层大伙不多 通过技术手段加以克服。

文件服务器层 

现在大伙的生产服务器一般是使用如下五种来作为好多好多 人的文件服务器层:

1)单NFS+备份NFS作为文件服务器,没有 的好处是维护方便,但居于着单点故障,还要人为手动干预;

2)DRBD+Heartbeat+NFS高可用文件服务器,维护方便,也不我居于着单点故障,但随着访问量的增大,后期一样居于着压力过大的具体情况;

3)分布式文件系统MFS、Gluster,,MFS易用,稳定,对海量小文件很高效,然后新版的MFS处理了

Master Server居于着单点故障的问提报告 , 国内不多的公司在使用MFS。事实上,分布式文件系统是处理文件服务器压力过大的最终途径,但好多好多 一起去都有隐患,网站功能不多,摊子越大,机器不多,维护起来越僵化 。

4)不可能 大伙的公司是淘宝和腾记好多好多 巨量级的公司,还可以尝试开发好多好多 人的分布式文件系统了,大伙还可以尝试根据好多好多 人网站的具体情况,来决定究竟选用哪五种软件来作为好多好多 人的文件服务器。 

数据库层 

数据库层的压力,我真是网站的PV和并发上去没有 ,数据库这块的压力是最大的,CDN大型广告网站大伙用的是Oacle RAC方案,它保证了数据的高可用性,当然了价格也是非常昂贵的(不可能 使用高配置的PC服务器,Oracle一般按照CPU个数收费);没有免费的 MySQL数据库,面对好多好多 并发压力大的具体情况,好多好多 没有 大伙应该为什会么会办呢?首先,大伙还可以在数据库加入memcached数据缓存,在实际线上使用时,大伙也发现memcached功能强大,性能稳定,在数据库频繁读写,压力过大的具体情况下,增加一台memcached数据缓存服务器的效果能超过大伙的预期。数据库的硬件方面还可以考虑投入,磁盘阵列做成RAID10,不可能 资金丰沛 ,磁盘还可以用固定硬盘来代替SAS硬盘,毕竟数据库的压力主要来自于磁盘I/O方面。合理的设计MySQL数据库的架构,事实上,在生产环境下,一主多从、读写分离是靠谱的设计方案,从MySQL的负载均衡我这里推荐大伙使用LVS,这是不可能 当后边的MySQL机器超过十台时,HAProxy在这方面的性能不如LVS。不可能 网站的业务量过大,大伙还可以采用分库的土法子,比如将网站的业务量分成Web、BBS、Blog等几组,每一组均采用主从架构,没有 设计得话就处理了单组数据库压力过大的具体情况。另外,大伙还应该配合公司的MySQL DBA和开发人员,在数据库参数优化、SQL得话优化、数据切分上多做功夫,处理数据库成为大伙网站的瓶颈。

希望大伙不多 通过以上网站的五层分解,结合好多好多 人网站的具体情况,了解每一层在网站设计中的作用和重要性,找出网站瓶颈加以优化,将好多好多 人的网站打造成高可用高可扩展性的网站。