changhongbao
- 浏览: 117379 次
- 性别:
- 来自: 北京
-
最新评论
文章列表
大型分布式网站架构技术总结
- 博客分类：
- 【46】、大型网站架构系列
大型分布式网站架构技术总结
本文是学习大型分布式网站架构的技术总结。对架构一个高性能，高可用，可伸缩，可扩展的分布式网站进行了概要性描述，并给出一个架构参考。一部分为读书笔记，一部分是个人经验总结。对大型分布式网站架构有很好的参考价值。（如果感觉对大家有帮助，请帮忙点推荐，谢谢。本博客会逐步推出一系列的关于大型分布式网站架构，设计模式，架构模式方面的系列文章，交流群：466097527）
本次分享大纲如下
大型网站的特点
大型网站架构目标
大型网站架构模式
高性能架构
高可用架构
可伸缩架构
可扩展架构
安全架构
敏捷架构
大型架构举例
一、 ...
大型网站架构系列：消息队列（二）
本文是大型网站架构系列：消息队列（二），主要分享JMS消息服务，常用消息中间件（Active MQ，Rabbit MQ，Zero MQ，Kafka）。【第二篇的内容大部分为网络资源的整理和汇总，供大家学习总 ...
大型网站架构系列：分布式消息队列（一）
以下是消息队列以下的大纲，本文主要介绍消息队列概述，消息队列应用场景和消息中间件示例（电商，日志系统）。
本次分享大纲
消息队列概述
消息队列应用场景
消息中间件示例
JMS消息服务（见第二篇：大型网站架构系列：分布式消息队列（二））
常用消息队列（见第二篇：大型网站架构系列：分布式消息队列（二））
参考（推荐）资料（见第二篇：大型网站架构系列：分布式消息队列（二））
本次分享总结（见第二篇：大型网站架构系列：分布式消息队列（二））
一、消息队列概述
消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息， ...
大型网站架构系列：电商网站架构案例(1)
大型网站架构是一个系列文档，欢迎大家关注。本次分享主题：电商网站架构案例。从电商网站的需求，到单机架构，逐步演变为常用的，可供参考的分布式架构的原型。除具备功 ...
大型网站架构系列：电商网站架构案例(3)
本文章是电商网站架构案例的第三篇，主要介绍数据库集群，读写分离，分库分表，服务化，消息队列的使用，以及本电商案例的架构总结。
6.5数据库集群（读写分离，分库分表）
大型网站需要存储海量的数据，为达到海量数据存储，高可用，高性能一般采用冗余的方式进行系统设计。一般有两种方式读写分离和分库分表。
读写分离：一般解决读比例远大于写比例的场景，可采用一主一备，一主多备或多主多备方式。
本案例在业务拆分的基础上，结合分库分表和读写分离。如下图：
（1） 业务拆分后：每个子系统需要单独的库；
（2） 如果单 ...
大型网站架构系列：电商网站架构案例(2)
电网网站架构案例系列的第二篇文章。主要讲解网站架构分析，网站架构优化，业务拆分，应用集群架构，多级缓存，分布式Session。
五、网站架构分析
根据以上预估，有几个问题：
需要部署大量的服务器，高峰期计算，可能要部署30台Web服务器。并且这三十台服务器，只有秒杀，活动时才会用到，存在大量的浪费。
所有的应用部署在同一台服务器，应用之间耦合严重。需要进行垂直切分和水平切分。
大量应用存在冗余代码
服务器SESSION同步耗费大量内存和网络带宽
数据需要频繁访问数据库，数据库访问压力巨大。
大型网站一般需要做以下架 ...
大型网站架构系列：负载均衡详解（4）
本文是负载均衡详解的第四篇，主要介绍了LVS的三种请求转发模式和八种负载均衡算法，以及Haproxy的特点和负载均衡算法。具体参考文章，详见最后的链接。
三、LVS负载均衡
LVS是一个开源的软件，由毕业于国防科技大学的章文嵩博士于1998年5月创立，用来实现Linux平台下的简单负载均衡。LVS是Linux Virtual Server的缩写，意思是Linux虚拟服务器。
基于IP层的负载均衡调度技术，它在操作系统核心层上，将来自IP层的TCP/UDP请求均衡地转移到不同的 服务器，从而将一组服务器构成一个高性能、高可用的虚拟服务器 ...
大型网站架构系列：20本技术书籍推荐
学习是技术人员成长的基础，本次分享20本技术方面的书籍，这些书不是每一本都是经典，但是每一本都有其特点。以下20本大部分本人都看过，因此推荐给大家。（本次推荐的20本只是 ...
大型网站架构系列：负载均衡详解（3）
本次分享大纲
软件负载均衡概述
Ngnix负载均衡
Lvs负载均衡
Haproxy负载均衡
本次分享总结
一、软件负载均衡概述
硬件负载均衡性能优越，功能全面，但是价格昂贵，一般适合初期或者土豪级公司长期使用。因此软件负载均衡在互联网领域大量使用。常用的软件负载均衡软件有Nginx，Lvs，HaProxy等。本文参考大量文档，部分为直接拷贝，参考出处见负载均衡详解（4）。
二、Ngnix负载均衡
Ngnix是一款轻量级的Web服务器/反向代理服务器，工作在七层Http协议的负载均衡系统。具有高性能、高并发、低内存使用等特点。 ...
大型网站架构系列：负载均衡详解（1）
面对大量用户访问、高并发请求，海量数据，可以使用高性能的服务器、大型数据库，存储设备，高性能Web服务器，采用高效率的编程语言比如(Go,Scala)等，当单机容量达到极限时，我们需要考虑业务拆分和分布式部署，来解决大型网站访问量大，并发量高，海量数据的问题。
从单机网站到分布式网站，很重要的区别是业务拆分和分布式部署，将应用拆分后，部署到不同的机器上，实现大规模分布式系统。分布式和业务拆分解决了，从集中到分布的问题，但是每个部署的独立业务还存在单点的问题和访问统一入口问题，为解决单点故障，我们可以采取冗余的方式。将相同的应用部署到多台机器上。 ...
大型网站架构系列：负载均衡详解（2）
本文是负载均衡详解的第一篇文章，介绍负载均衡算法， 硬件负载均衡。部分内容摘自读书笔记。
三、负载均衡算法
常用的负载均衡算法有，轮询，随机，最少链接，源地址散列，加权等方式；
3.1 轮询
将所有请求，依次分发到每台服务器上，适合服务器硬件同相同的场景。
优点：服务器请求数目相同；
缺点：服务器压力不一样，不适合服务器配置不同的情况；
3.2 随机
请求随机分配到各个服务器。优点：使用简单；
缺点：不适合机器配置不同的场景；
3.3 最少链接
将请求分配到连接数最少的服务器（目前处理请求最少的服务器）。
在开发过程中经常会遇到这样的情况，自己写个类继承某个jar包中的类，想在用eclipse开发程序的过程中，看看jar包中对应的类中的方法，但jar包中的都是class文件，往往按下ctrl+鼠标，想看下这个类时会出现这样情况：
所以，在eclipse中安装一个查看源码的反编译工具插件很必要且方便，那么怎么做呢？
首先：分享一下下载插件的地址，百度网盘：链接：http://pan.baidu.com/s/1nturiAH 密码：yk73
其次：我来说下具体操作步骤：
1、把net.sf.jadclipse_3.3.0.jar拷到C:\Documents and Setting ...
1.指定本机java环境
Windows-->preferences-->java-->Insetallel JREs
右侧 单击ADD-->standard VM-->Next-->Directory-->Finash
点选 新增jre环境-->点击OK
2.更换背景颜色 个人感觉白色比较刺激眼睛 可选择性更换
Windows-->preferences- ...
Windows+Git+TortoiseGit+COPSSH 安装图文教程
准备工作：
1、 Git-1.8.1.2-preview20130201.exe
下载地址：
https://code.google.com/p/msysgit/downloads/list
2、 Copssh_4.1.0_Installer.exe
下载地址：
http://download.csdn.net/download/zzjzmdx/4636227
3、 TortoiseGit-1.8.5.0-64bit.msi
下载地址：
https://code.google.com/p/to ...
MyEclipse Debug调试，鼠标移动到变量上不显示值的解决办法。
Window->Preferences->Java->Editor->Hovers 将[Variable Values]选择即可，如果第一个[Combined Hover]已经勾选，则将这个勾去掉，勾选[Variable Values]。如果还不行，就只能用ctrl+shift+i快捷键了。