如何实现集群技术

1)强扩展能力
其他扩展技术，通常仅能支持儿十个CPU 的扩展，扩展能力有限。而采用集群技术的集群系统则可以扩展到包括成百上千个CPU的多台服务穗，扩展能力具有明显优势。集群服务还可不断进行调整，以满足不断增长的应用需求。当集群的整体负荷超过集群的实际能力时，还可以添加额外的节点。
2)实现方式容易
服务器集群技术相对其他扩展技术来说更加容易实现，主要是通过软件进行的。在硬件上可以把多台性能较低、价格便宜的服务器，通过集群服务集中连接在一起即可实现整个服务器系统成倍，甚至几十、几百倍地增长。无论是从软硬件构成成本上来看，还是从技术实现成本上来看都较其他扩展方式低。
3)高可用性
使用集群服务拥有整个集群系统资源的所有权。如磁盘驱动器和IP地址将自动地从有故障的服务器上转移到可用的服务器上。当集群中的系统或应用程序出现故障时，集群软件将在可用的服务器上，重启失效的应用程序，或将失效节点上的工作分配到剩余的节点上。在切换过程中，用户只是觉得服务暂时停顿了一下。
4)易管理性
可以使用集群管理器来管理集群系统的所有服务器资源和应用程序，就像它们都运行在同一个服务器上一样。可以通过拖放集群对象，在集群里的不同服务器间移动应用程序，也可以通过同样的方式移动数据，还可以通过这种方式来手工地平衡服务器负荷、卸载服务器，从而方便地进行维护。同时，还可以从网络的任意地方的节点和资源处，监视集群的状态。当失效的服务器连回来时，将自动返回工作状态，集群技术将自动在集群中平衡负荷，而不需要入工干预。

集群是由一些互相连接在一起的计算机构成的一个并行或分布式系统。这些计算机一起工作并运行一系列共同的应用程序，同时，为用户和应用程序提供单一的系统映射。从外部来看，它们仅仅是一个系统，对外提供统一的服务。集群内的计算机物理上通过电缆连接，程序上则通过集群软件连接。这些连接允许计算机使用故障应急与负载平衡功能，而故障应急与负载平衡功能在单机上是不可能实现的。
服务器集群系统通俗地讲就是把多台服务器通过快速通信链路连接起来，从外部看来，这些服务器就像一台服务器在工作，而对内来说，外面来的负载通过一定的机制动态地分配到这些节点机中去，从而达到超级服务器才有的高性能、高可用。

1、sentinel monitor
当所有节点启动后，配置文件中的内容发生了变化。

2、sentinel down-after-milliseconds

每个Sentinel节点都要通过定期发送ping命令来判断Redis数据节点和其余Sentinel节点是否可达，如果超过了down-after-milliseconds配置的时间且没有有效的回复，则判定节点不可达，

3、sentinel parallel-syncs

parallel-syncs就是用来限制在一次故障转移之后，每次向新的主节点发起复制 *** 作的从节点个数。

4、sentinel failover-timeout

ailover-timeout通常被解释成故障转移超时时间，但实际上它作用于故障转移的各个阶段：

a）选出合适从节点。

b）晋升选出的从节点为主节点。

c）命令其余从节点复制新的主节点。

d）等待原主节点恢复后命令它去复制新的主节点。

failover-timeout的作用具体体现在四个方面：

1）如果Redis Sentinel对一个主节点故障转移失败，那么下次再对该主节点做故障转移的起始时间是failover-timeout的2倍。

2）在b）阶段时，如果Sentinel节点向a）阶段选出来的从节点执行slaveof no one一直失败（例如该从节点此时出现故障），当此过程超过failover-timeout时，则故障转移失败。

3）在b）阶段如果执行成功，Sentinel节点还会执行info命令来确认a）阶段选出来的节点确实晋升为主节点，如果此过程执行时间超过failover-timeout时，则故障转移失败。

4）如果c）阶段执行时间超过了failover-timeout（不包含复制时间），则故障转移失败。注意即使超过了这个时间，Sentinel节点也会最终配置从节点去同步最新的主节点。

5、sentinel auth-pass

如果Sentinel监控的主节点配置了密码，sentinel auth-pass配置通过添加主节点的密码，防止Sentinel节点对主节点无法监控。

6、sentinel notification-script

sentinel notification-script的作用是在故障转移期间，当一些警告级别的Sentinel事件发生（指重要事件，例如-sdown：客观下线、-odown：主观下线）时，会触发对应路径的脚本，并向脚本发送相应的事件参数。

7、sentinel client-reconfig-script

sentinel client-reconfig-script的作用是在故障转移结束后，会触发对应路径的脚本，并向脚本发送故障转移结果的相关参数

Redis Sentinel可以同时监控多个主节点，具体拓扑图如下：
配置方法也比较简单，和监控一个主节点配置类型，只需要指定多个masterName来区分不同的主节点即可。

Sentinel节点也支持动态地设置参数，而且和普通的Redis数据节点一样并不是支持所有的参数。

Sentinel节点可以使用sentinel set

支持的参数：

sentinel set命令只对当前Sentinel节点有效,sentinel set命令如果执行成功会立即刷新配置文件，这点和Redis普通数据节点设置配置需要执行config rewrite刷新到配置文件不同。建议所有Sentinel节点的配置尽可能一致，这样在故障发现和转移时比较容易达成一致。Sentinel对外不支持config命令。

集群就是很多的服务器来实现一种功能，向mysql，很多的服务器都安装mysql,负载均衡就是用来调节的，比方说有很多的用户都在访问读取数据，可是读取a服务器的mysql多，而读取别的服务器的mysql就少，负载均衡把访问a的用户转给b一部分，防止a由于访问量过大造成宕机什么的。分布式就是有很多把服务器的相同功能分别部署在很多太计算机上，然后每个地方放上几台，这几台负责提供本地的服务，并且和总的服务器连接，保持数据传递。

VMWARE

服务器虚拟化介绍

利用虚拟化基础架构技术，可以不断整合工作负载，从而充分利用服务器并降低运营成本。该基础架构技术不但使系统管理员能够管理更多的服务器，而且在置备新的软件服务和维护现有软件服务时，具有更高的灵活性，响应也更快速。最重要的是，它实现了各种基于 x86 的环境下管理工作的标准化和简化，这包括 Microsoft Windows、Linux、及Solaris x86 等 *** 作系统。

VMware 服务器虚拟化解决方案拓扑图

VMware虚拟架构可以让IT部门达成以下目标：

∙ 达到甚至超过每个CPU，4个负载的整合比率

∙ 更便宜的硬件和运作成本

∙ 在服务器管理方面的重大改进，包含添加，移动，变更，预制和重置

∙ 基础应用将变得更强壮和灾难抵御能力

VMware软件可帮助我方实现：

∙ 减少28％－53％的硬件成本

∙ 减少72％－79％的运作成本

∙ 减少29％－64％的综合成本

建设目标：

∙ 整合空闲服务器和存储资源，为新项目重新部署这些资源

∙ 提升运作效率

∙ 改进服务器的管理灵活性

∙ 通过零宕机维护改善服务等级

∙ 标准化环境和改进安全

∙ 灾难状态下，减少恢复时间

∙ 更少冗余的情况下，确保高可用性

∙ 更有效的适应动态商业的需求

∙ 在技术支持和培训方面降低成本

提高运营效率

部署时间从小时级到分钟级， 服务器重建和应用加载时间从 20-40 hrs到15-30 min， 每年节省10，00 人/小时（30台服务器）；

以前硬件维护需要之前的数天/周的变更管理准备和1 - 3小时维护窗口，现在可以进行零宕机硬件维护和升级。

提高服务水平

帮助建立业务和IT资源之间的关系，使IT和业务优先级对应；

将所有服务器作为大的资源统一进行管理，并按需自动进行动态资源调配；

无中断的按需扩容。

旧硬件和 *** 作系统的投资保护

不再担心旧系统的兼容性，维护和升级等一系列问题。

VMware虚拟化具有的主要功能

1、VMware VMotion

通过VMware VMotion可以实现虚拟机的动态迁移， 而服务不中断 。VMware VMotion 是一项由 VMware 独家提供的革命性技术，它可以将正在运行的虚拟机移动到另一台物理服务器上，同时使服务始终保持可用状态，并实现零停机。虽然 VMotion 需要用户手动执行，但是该产品也是 VMware DRS 等产品的基础，这些产品可在预定义的条件下自动移动虚拟机。

VMotion 是 VMware 第一款实现虚拟机分发的产品，它创造了条件，使您可以根据需要移动工作负载，以便维持服务级别和性能目标。现在可以在不安排停机时间、不中断业务运营的情况下执行硬件维护。

2、VMware Storage VMotion

Storage VMotion 对异构存储阵列执行的 *** 作与 VMotion 对物理服务器执行的 *** 作相同。Storage VMotion 可以将虚拟机磁盘文件从一个共享存储位置重新分配到另一个共享存储位置，并具有与 VMotion 相同的优势：零停机、连续的服务可用性和全面的事务完整性。

这些优势适用于在许多情景中管理存储容量和性能。其中包括从一个存储阵列迁移到另一个存储阵列，或将虚拟机磁盘文件移动到位于光纤通道阵列上经过性能优化的 LUN。Storage VMotion

的无中断特性意味着可以更积极地管理和平衡存储容量，以及

减少 I/O 性能问题。

3、VMware分布式资源调度（DRS）

除了 VMotion 和 VMware HA 等支持服务器超长正常工作时间和高可用性的产品之外，VMware 还开发了一些优化工具，用来维护 VMware Infrastructure 的高效率。VMware DRS 就是其中之一。VMware Infrastructure 将符合业界标准的服务器及其附带的网络和存储器聚合到一个共享的计算、网络和存储资源池。DRS 动态地分配和平衡计算容量以保证对资源的最优访问。

它主动监控容量利用率，并以智能化的方式在资源池中自动平衡虚拟机，以达到服务级别要求。DRS 根据定义的业务优先级和不断变化的容量需求在不同的虚拟机间分配可用的计算容量。当某个虚拟机的负载增大时，DRS 会自动将该虚拟机迁移到另一台可用资源较多的物理服务器，从而为它分配更多的容量。反之，当 VMware DRS 检测到资源池使用较少的服务器即可运行工作负载时，它会让它们进入待机模式，从而减少电力消耗。无论是哪种情况，它管理资源分配时都不需要让资源池中的虚拟机停机。

3、

VMware HA

共享存储访问的服务器主机的 CPU、内存和其他资源放在共享池中。VMware HA 产品将虚拟机重启自动化，所以它从位于资源池中的其他服务器主机而不是刚刚停机的主机处获取资源。由于硬件故障而失去一台 VMware ESX 主机并不会演化为一场灾难性事件，而仅仅意味着可用的资源池减少了。在群集中失去一台主机只会使资源减少，而不会失去虚拟机。VMware HA 会检测到故障主机，管理重新分配资源，并在另一台 VMware ESX 主机上重新启动故障主机的虚拟机。VMware HA 易于使用，可以为虚拟机中运行的应用程序提供经济高效的高可用性。

不需要专门的备用硬件，也不需要集成其他软件，就可以将停机时间和 IT 服务中断时间降到最低程度。VMware HA 可以实现 IT 环境的高可用性，而且避免了单一 *** 作系统或特定于应用程序的故障切换解决方案带来的成本和复杂性。

4、VMware Converter

这是一款自动将物理机、其他格式的虚拟机和第三方映像格式转换为 VMware

虚拟

机的工具。VMware 的客户主要使用 VMware Converter 来简化物理服务器环境的虚拟化流程。

VMware虚拟化方案的应用效果

根据以上服务器的虚拟化整合方案，新的虚拟构架能为系统应用提供前所未有的资源利用率，并为所有系统运算和I/O提供资源控制。虚拟构架完美地结合FC SAN存储，实现了最大的投资回报率。通过把物理系统整合到有虚拟构架的数据中心上去，可以体现如下的价值：

● 本次虚拟化整合以后，将目前的约20台服务器减少至4台左右。最终将会大大降

低机房能耗，大大降低运营成本。

● 该方案将极大的提供服务器整合的效率，大幅度简化服务器群管理的复杂性，管理

员只通过同一个虚拟主机管理系统，就可对所有的虚拟主机进行管理，同时虚拟主机管理软件能监控服务器CPU、内存使用情况，对于有服务器不正常工作时也会自动报警。

● 改造以后可以做到应用零停机，虚拟架构中虚拟机可动态在线从一台物理服务器迁

移到另一台物理服务器上，当物理服务器底层出现故障时，所有在线的虚拟机都可以自动迁移到另一台主机，保持应用不中断。这样将可提升系统的运作效率，虚拟化平台的虚拟机都可以进行在线的热迁移，无需停止业务系统应用。如果底层硬件需要更新的时候，只需要在新的服务器上安装虚拟主机底层，然后将虚拟主机加入集群，然后使用虚拟机的VMotion热迁功能，即可完成业务系统的迁移，在此过程中业务系统将不会停止工作。

● 空闲系统资源的整合，目前的业务系统多，又必须使用单独的系统，因此就得依靠

大量的服务器，但是以Web业务为主的系统本身对硬件的要求不是很高，这样就导致服务器资源利用率不高，而在服务器虚拟化整合以后，通过虚拟化的动态资源调配功能，保证服务器利用率的最大化。

● 不再担心旧系统的兼容性，维护和升级等一系列问题。

● 企业采用服务器虚拟化的好处：

● 1 减少服务器的数量，提供一种服务器整合的方法，减少初期硬件采购成本

2 简化服务器的部署、管理和维护工作，降低管理费用

3 提高服务器资源的利用率，提高服务器计算能力

4 通过降低空间、散热以及电力消耗等途径压缩数据中心成本

5 通过动态资源配置提高IT对业务的灵活适应力

6 提高可用性，带来具有透明负载均衡、动态迁移、故障自动隔离、系统自动重构的高可靠服务器应用环境

7 支持异构 *** 作系统的整合，支持老应用的持续运行

8 在不中断用户工作的情况下进行系统更新

9 支持快速转移和复制虚拟服务器，提供一种简单便捷的灾难恢复解决方案

VSphere 5产品介绍

VMware vSphere 5 的新增功能

VMware vSphere 是用于构建云计算基础架构的业界领先的虚拟化平台。它使用户能够自信地运行关键业务应用程序，更快地响应业务需求。

vSphere 加快了现有数据中心向云计算的转变，同时还支持兼容的公共云服务，从而形成了业界唯一的混合云模式的基础。

一 基础架构服务（计算、存储和网络）

1 计算

• vSphere ESXi 聚合 — vSphere 5 在 ESXi 虚拟化管理程序体系结构之上实现聚合。ESXi 是虚拟化管理程序的黄金级标准，它使 vSphere 用户能够利用

更精简的体系结构、更安全的占用空间和简化的修补及设置模型。

• vSphere 自动部署 — 自动部署是针对运行 ESXi 虚拟化管理程序的新 vSphere 主机的新部署和修补模型。数分钟即可部署更多 vSphere 主机，而且

更新也变得空前高效。

• 新的虚拟机格式（版本 8） — vSphere 5 中的新虚拟机格式具有若干新功能，包括支持： – Windows Aero 的 3D 图形

– USB 30 设备

• Apple 产品支持 — vSphere 5 支持将运行 OS X Server 106(Snow Leopard) 的 Apple Xserve 服务器作为客户 *** 作系统。

2 存储

• vSphere 存储 DRS — 通过分组、放置和平衡改进管理并实现更高效的存储资源利用。 • 配置文件驱动的存储 — 根据服务级别确定要用于给定虚拟机的适当存储。这样就简化了选择正确的存储并确保提供该存储的方法。

• vSphere 文件系统 — 通过无中断地升级到该平台的最新集群文件系统版本，从而利用增强的可扩展性和性能。

• vSphere 存储 I/O 控制 — 通过扩展网络文件系统 (NFS) 数据存储区中的限制和共享来改进服务级别协议 (SLA) 的管理和执行。

• vSphere Storage API Program — 利用支持精简配置的阵列集成 API 扩展。使用新的 vSphere 存储 DRS 和配置文件驱动的存储功能时，利用新的Storage Awareness and Discovery API与阵列交互。

3 网络

• vSphere 网络 I/O 控制 — 新的每虚拟机控制允许更精确地强制执行 SLA。

• vSphere Distributed Switch — 通过 NetFlow 来提高虚拟机流量的可见性，并通过 Switched Port Analyzer (SPAN) 和链路层发现协议 (LLDP) 支持来增强

监控和故障排除。

二 应用程序服务（可用性、安全性和可扩展性）

1 可用性

• vSphere High Availability — 新的体系结构可以实现一流的保证、简化的设置和配置以及更强的可扩展性。

• vSphere vMotion — 现在支持通过较高延迟的网络链路进行虚拟机迁移。

2 安全性

• ESXi 防火墙 — 新的面向服务且无状态的防火墙引擎可以按IP 地址或子网限制对特定服务的访问。这对于需要网络访问的第三方组件特别有用。

3 可扩展性

• 更大型的虚拟机 — 虚拟机现在可以增长到任何以前版本的 4倍，甚至可以支持最大型的应用程序。虚拟机现在可以拥有多达 32 个虚拟 CPU 和

1 TB RAM。

三 管理服务

核心管理

• vSphere Web 客户端 — 在全球任何位置从任何 Web 浏览器访问 vSphere。

• VMware vCenter Server 设备 — 将 vCenter Server 作为基于Linux 的虚拟设备来运行。

市面上存在两种数据库负载均衡的思路：1

基于数据库连接的负载均衡：例如总共有100个数据库连接，50个连接登录到数据库机器A，另外50个连接登录到数据库机器B，这样每个连接中接下来的所有请求全都是发往同一台数据库机器的

这种数据库负载均衡的思路模拟了WEB上的负载均衡方法，但是由于WEB连接是短时间连接(连接建立后，获取需要的HTML等资源后，连接马上被关闭)，而数据库连接是长时间连接(连接建立后，可长时间保持，客户可不停向数据库发送SQL请求，数据库做出回答，如此不断循环直到连接被人为或因错而断开为止)，因此这种数据库负载均衡思路存在着明显的缺点：有可能会发生绝大部分的请求压力都集中到某台数据库机器上去，从而使得负载均衡效果失效

2

基于批处理请求的负载均衡：在建立数据库连接的时候，会同时与每台数据库服务器建立连接，之后针对客户端的每次请求，都会根据负载均衡算法，独立地选出某个数据库节点来执行这个请求

此种思路符合数据库长时间连接的特征，不存在上面所述的基于连接的负载均衡方法的缺点

市面上的负载均衡厂商，既有基于连接的，也有基于批处理请求的，用户需仔细辨别才能找到自己想要的合适产品

一、主从服务器

1、两台服务器。主服务器Master复制数据的更新、插入、删除等 *** 作； 从服务器Slave负责查询（读写分离，减缓服务器压力）

2、主服务器更新数据的同时更新从服务器的数据（数据备份）

3、当主服务器出现文件时，可用从服务器代替主服务器，保证网站的正常运行，同时检测主服务器存在的问题。注意：从服务器仍然只有查询功能，如银行系统更新时只能查询余额，不能存取款。（服务器可用性）

4、当把从服务器真正设置为主服务器时（即主从服务器设置调换），拥有更新数据的功能。

5、MyISAM不支持事务，但查询性能比InnoDB强；InnoDB支持事务，更新 *** 作性能比MyISAM强。因此，主服务器可以设置成MyISAM存储引擎，从服务器可以设置成InnoDB存储引擎（灵活设置存储引擎）

二、负载均衡

1、多台服务器。一个域名映射到多台服务器IP。

2、用户发出请求，提交到负载均衡服务器，由负载均衡服务器发送请求到不同的服务器。

3、负载均衡服务器选取服务器方法（负载均衡算法）：

1、轮询：每台服务器轮换

2、加权轮询：为了应对某些服务器性能好，可以让他们的权重高一点，被选中的几率大一些。

3、最少连接：哪台服务器处理的连接少，就发给哪台服务器。

4、随机

4、存在的问题：客户端存在缓存，如果服务器出现故障，客户端报错。

5、分类：DNS负载均衡、>