大型网站后台构建实践

开发 架构
公司接了个新项目,建一个查询网站,同一时间可能会面对1万甚至以上的查询量。普通PC环境,大约同时支持2000到3000的并发量,当然,我不排除有高手进行后台服务器优化,实现更高的并发量……

公司接了个新项目,建一个查询网站,同一时间可能会面对1万甚至以上的查询量。

普通PC环境,大约同时支持2000到3000的并发量,当然,我不排除有高手进行后台服务器优化,实现更高的并发量。

一些大型的网站会采取“分流”的方式去将连接平均分摊到后台服务器,例如前面一台主机负责接收连接和与后台服务器的负载均衡。如下图:

 

 

实例如途中,一共需要配置了多台服务器。

server1——装有Centos6.3,Web server 为Nginx,主要功能对网站用户进行负载均衡,将访问派送到后台的Webserver。

server2——装有Centos6.3,基本配置为LAMP,或者LNMP。两者皆有优缺点。主要用户保存网站,数据存储和网站数据处理等工作。

server3——同上

server4——同上

……

……

同时,为了保证数据的一致性,我们会采取一种数据库同步的操作,利用1主2从,最后再做加入新从的测试。其实之前我也做过,具体可以参照之前写的博客《Mysql 复制(Replication)实现》

正式开始配置

先分别为4台server安装Centos6.3,不选择安装Webserver,Database和PHP等,只安装Centos。

配置辅助负载均衡的server前,先配置后台server,这里,我选择配置LNMP,具体配置方法可以参照我博文《Centos 6.2 实际工作环境搭建(LNMP)》

也可以使用《一键安装LANMP》

这里我所使用的是一键安装LANMP版本,配置比较简单,比较适合新手。

下载安装

wget http://dl.wdlinux.cn:5180/lanmp_v2.4.tar.gz

tar zxvf lanmp_v2.4.tar.gz

sh in.sh

4个可选安装,如下图

 

1,2,3 是安装独立的环境,不可自由切换nginx,apache,nginx+apache应用环境

4 是安装所有,即可自由切换nginx,apache,nginx+apache的应用环境

编译安装比较慢,现只提供在CentOS 5.X/wdlinux_base 5.X/wdos 1.X 系统下的RPM安装,5分钟就可以

也可以直接下载wdos的安装,集成最新的wdcp,不过目前只有32位

具体可看 http://www.wdlinux.cn/bbs/thread-2431-1-1.html 

虽然安装LANMP,但实际应用的时候会将服务系形似分配成LNMP或者LAMP。

测试通过就继续安装,分别安装了3台。

测试通过后,实际环境为:

1.LN(Centos6.3+Nginx)用于负载均衡---IP地址:192.168.1.100

2.LNMP(Centos6.3+Nginx+Mysql+PHP)Web服务器---IP地址:192.168.1.171

3.LNMP(Centos6.3+Nginx+Mysql+PHP)Web服务器---IP地址:192.168.1.172

4.LNMP(Centos6.3+Nginx+Mysql+PHP)Web服务器---IP地址:192.168.1.173

5.LNMP(Centos6.3+Nginx+Mysql+PHP)备用Web服务器---IP地址:192.168.1.174

Mysql复制

 按照一开始的架构图,需要1主2从,所以开始配置mysql复制,具体可以参照之前写的博客《Mysql 复制(Replication)实现》 使用前要先说明,如果使用一键安装版,就需要将read_only = 1 这个选项去掉,不能添加。这个只读设置会影响一键安装版的PHP管理页面。

2号服务器的Mysql为主,3号,4号的为从。

配置过程中,要将2个数据库列出到排外,不需要进行复制同步。避免数据库出错。

  1. #主/etc/my.cnf  
  2. binlog_ignore_db=mysql,wdcpdb  
  3. #从/etc/my.cnf  
  4. replicate-ignore-db=mysql  
  5. replicate-ignore-db=wdcpdb 

配置完毕后,在两天从中输入:

  1. SHOW SLAVE STATUS\G 

查看复制状态,当看见

  1. Slave_IO_Running: Yes  
  2. Slave_SQL_Running: Yes 

就已经证明复制已经可以正常运作。在主随便创建一个数据库,然后在从刷新,就会出现刚复制过来的数据库。

#p#

虚拟主机

做到这一步,基本就已经完成,剩下的就是建立虚拟主机放置网站和设定Nginx负载均衡。

 

 打开浏览器输入192.168.1.171:8080,进入wdcp服务器管理界面,根据下图进行简单设置。

 

 

简单说明,增加服务器端口,是因为文章开头已经说过,在假设没有DNS的前提下进行操作,没有DNS的域名识别,如何进行虚拟主机识别呢?用端口。我这里分别开通了81,82.Web引擎,默认是Lanmp的就是Linux+apache+Nginx+Mysql+php,我们这个项目需要高并发量,所以设置了Lnmp就是Web引擎为Nginx。设置完成后重启。

设置虚拟主机

 

使用该管理系统新建虚拟主机非常简单,只需要点击新建站点,写一下域名,就可以了,当然,记得将端口改为81.分别在三台服务器中建立虚拟主机,端口号均为81.实际的第一个站点的虚拟主机如下:

  1. 1-server-192.168.1.171:81  
  2. 2-server-192.168.1.172:81  
  3. 3-server-192.168.1.173:81 

注意问题:系统时间

有时候安装完系统,系统时间会跟实际时间有出入,可能是时区问题,可能是虚拟机问题,等等,无论问题,都要调整时间,下面为Linux调整时间的方法。

  1. 修改linux的时间可以使用date指令  
  2.  
  3. 在命令行输入:  
  4.  
  5. date  
  6.  显示当前时间 Fri Aug  3 14:15:16 CST 2007 
  7.  
  8. date -s   
  9. 按字符串方式修改时间  
  10. 可以只修改日期,不修改时间,输入: date -s 2007-08-03 
  11. 只修改时间,输入:date -s 14:15:00 
  12. 同时修改日期时间,注意要加双引号,日期与时间之间有一空格,输入:date -s "2007-08-03 14:15:00" 
  13.  
  14. 修改完后,记得输入:clock -w   
  15. 把系统时间写入CMOS 

负载均衡

对于LN 的安装我就不再说明,直接跳过。(Linux+Nginx)

首先要开通负责负载均衡服务器(LN)的80端口。

1.配置Nginx.conf

  1. vi /etc/nginx/nginx.conf 

修改成

  1. user  nginx;  
  2. worker_processes 10;  
  3. #error_log  logs/error.log;  
  4. #error_log  logs/error.log  notice;  
  5. #error_log  logs/error.log  info;  
  6. #pid        logs/nginx.pid;  
  7. worker_rlimit_nofile 51200;  
  8. events  
  9. {  
  10.       use epoll;  
  11.       worker_connections 51200;  
  12. }  
  13. http  
  14. {  
  15.       include       /etc/nginx/mime.types;  
  16.       default_type  application/octet-stream;  
  17.       keepalive_timeout 120;  
  18.       tcp_nodelay on;  
  19.     upstream s01 {  
  20.     server 192.168.1.171:81;  
  21.     server 192.168.1.172:81;  
  22.     server 192.168.1.173:81;  
  23.     }  
  24.     server {  
  25.     listen 80;  
  26.     server_name s01.domain.com;  
  27.     location / {  
  28.                        proxy_pass        http://s01;  
  29.               }  
  30.     }  

2.重启Nginx

  1. service nginx restart 

原文链接:http://my.oschina.net/Tingel/blog/80918

责任编辑:林师授 来源: OSCHINA
相关推荐

2017-07-25 10:57:05

2011-05-04 10:52:25

架构网站

2010-09-25 08:51:00

SNS网站Facebook人人网

2015-05-04 09:56:19

HTTPS

2016-11-07 21:00:04

网站service架构设计

2013-10-15 13:24:00

负载均衡架构

2013-07-14 17:05:49

2024-10-05 00:00:25

Cursor网站代码

2016-01-13 10:35:17

网站技术OpenStack云管理

2022-05-24 12:16:36

存储迁移存储层diff

2012-05-11 16:25:41

IBM ELSIBM大型主机IBM System

2012-09-28 14:08:20

大型网站架构大型网站算法算法

2014-03-11 15:47:29

大型网站速度优化运维人员

2014-09-26 09:53:41

系统架构架构架构演变

2015-12-14 10:26:40

2017-05-08 11:53:21

2018-04-13 08:44:40

存储大型网站

2014-06-17 14:01:34

Mysql网站架构

2016-09-28 22:04:01

GNUAutotoolLinux

2019-12-16 12:11:53

Docker容器Kubernetes
点赞
收藏

51CTO技术栈公众号