在分布式系统与高并发架构中,负载均衡器如同“交通指挥官”,其策略选择的优劣直接决定了系统吞吐量、响应时间与容错能力,面对轮询(Round Robin)、加权轮询(Weighted Round Robin)、最少连接(Least Connections)、源IP哈希(Source IP Hash)等常见策略,开发者常陷入选择困境,本文结合理论深度与实践案例,助你做出精准决策。
广域网加速技术有几大分类?
广域网加速技术主要有一下几种:
1、数据缓存技术
高速缓存技术很早就出现,它主要用来解决带宽瓶颈、应用延迟问题。 目前市场上有一些产品比较典型的就是采用WEB文件缓存和数据字节缓存技术这两种。 将WEB文件缓存到设备中,主要是针对WEB 应用访问,对于TCP应用是没有效果的;另一种是动态缓存,将数据压缩以后按照重复性频率较高的字节以指针的方式缓存于设备中,下次遇到同样的数据时,将直接从缓存中存取。
2、内容分发网络
CDN(Content Delivery Network)是一个经策略性部署的整体系统,能够帮助用户解决分布式存储、负载均衡、网络请求的重定向和内容管理等问题,从而一定程度解决跨越广域网访问互联网服务器的带宽瓶颈、数据丢包、TCP延迟问题。 CDN的目的是通过在现有的Internet中增加一层新的网络架构,将网站的内容发布到最接近用户的网络“边缘”,使用户可以就近取得所需的内容,解决 Internet 网络拥塞状况,提高用户访问网站的响应速度。 此方案对大型网站较为有效。
3、TCP优化及应用优化
专用的TCP加速或应用加速设备可以帮助改善网络环境中的应用性能,如大带宽链路、大文件传输、高时延、相当大的网络交易等。 TCP优化主要解决数据丢包、TCP延迟问题;应用优化主要解决应用延迟问题(如果一个应用在应用层就受到应用消息大小和数据回应及确认需要的限制时,不管带宽有多充裕,也不管是否已经避免了由TCP协议的端到端应答机制造成延迟瓶颈或是TCP的慢启动和拥塞控制行为引起延迟瓶颈,应用延迟不可避免。
目前市场上的专业TCP加速设备及应用加速设备都需要在企业链路的两端部署,代价非常高。 这些专用的加速器都需要自己的专门协议才可以达到加速效果,也就是说基于网络是不透明的。 后果就是,网管人员或系统无法看到正在广域网上运行着的应用,还有必要为这些设备所用的专用传输协议在安全设备上特别打开通道,带来安全隐患。
4、数据压缩
压缩可提高应用性能,创造更大的吞吐率,更快的性能以及更大的网络容量。 压缩可更快地传输数据,让更多的流量通过有限的广域网链路。 当获得更多的带宽时,最关键业务应用的性能便可得到大大的提高。 数据压缩需要设备成对使用,部署在连接的两个端点。
大部分的企业都会在其各个分支机构分别部署一台设备,这样各分支机构之间以及与主站点之间都可以交换流量。 这种部署方案可充分利用整个企业的所有带宽。 每个设备压缩Outbound流量,接收终点的设备解压缩Inbound流量,将流量恢复至原始状态。 数据压缩技术主要解决带宽瓶颈,具有广泛适用性。
5、服务质量控制QoS
服务质量控制或带宽管理QoS有助于减轻带宽的竞争。 对于宝贵的WAN带宽,应用之间会有竞争,控制竞争的一个有效方法是利用带宽分配和服务质量(QoS)工具。
IT人员能够根据应用业务规则分配WAN上应用的优先级,确保该应用能够获得足够的带宽,从而提高与业务紧密相关的生产率。
Hadoop和MapReduce究竟分别是做什么用的
1、hadoop是一种分布式系统的平台,通过它可以很轻松的搭建一个高效、高质量的分布系统,而且它还有许多其它的相关子项目,也就是对它的功能的极大扩充,包括Zookeeper,Hive,HBase等。 2、MapReduce是hadoop的核心组件之一,hadoop要分布式包括两部分,一是分布式文件系统hdfs,一部是分布式计算框,就是mapreduce,缺一不可,也就是说,可以通过mapreduce很容易在hadoop平台上进行分布式的计算编程。 再详细的话,你得多看些文档。
星形拓扑结构,总线形拓扑结构,网形拓扑结构的特点及其适用范围各是什么?
星型拓扑结构的特点如下。 (一)可靠性强 在网络中,连接点往往容易产生故障。 星型拓扑结构中,由于每一个连接点只连接一个设备,所以当一个连接点出现鼓故障时只影响相应的设备,不会影响整个网络。 (二)故障诊断和隔离容易 由于每个节点直接连接到中心节点,如果是某一节点的通信出现问题,就能很方便地判断出有故障的连接,方便的将该节点从网络中删除。 如果是整个网络的通信都不正常,则虚考虑是否是中心节点出现了错误。 (三)所需电缆多 由于每个节点直接于中心节点连接,所以整个网络需要大量电缆,增加了组网成本。 (四)可靠性依赖于中心节点 如果中心节点出现故障,则全网不可能工作。 总的来说星型拓扑结构相对简单,便于管理,建网容易,是目前局域网普采用的一种拓扑结构。 采用星型拓扑结构的局域网,一般使用双绞线或光纤作为传输介质,符合综合布线标准,能够满足多种宽带需求总线型拓扑结构的特点如下: (一)易于分布 由于节点直接连接到总线上,电缆长度短,使用电缆少,安装容易,扩充方便。 (二)故障诊断困难 各节点共享总线,因此任何一个节点出现故障都将引起整个网络无法正常工作。 并且在检查故障时必须对每一个节点进行检测才能查出有问题的节点。 (三)故障隔离困难 如果节点出现故障,则直接要将节点除去,如果出现传输介质故障,则整段总线要切断。 (四)对节点要求较高每个节点都要有介质访问控制功能,以便与其他节点有序地共享总线。 总线型拓扑结构适用于计算机数目相对较少的局域网络,通常这种局域网络、的传输速率在100Mbps,网络连接选用同轴电缆。 总线型拓扑结构曾流行了一段时间,典型的总线型局域网有以太网!网形拓扑结构特点如下:1.不受瓶颈问题和失效问题的影响。 2.结构复杂,成本比较高,为提供不受瓶颈问题和失效问题的影响的功能,网形拓扑结构的网络协议也比较复杂。 3.可靠性强。 适用于广域网。














发表评论