H3C 无线网络勘测典型场景酒店办公大楼

第二篇：不同酒店无线网络设计方案

商务客人常常喜欢在酒店大堂、咖啡厅或茶座里用笔记本电脑工作，或是在这些地方进行一个小型的会谈，当客人需要处理电子邮件或上网下载公司的资料时，得到的回答往往是：“您必须换一个靠近某个数据点的位置”、“您可以到商务中心去”，或“您必须到房间里用电话线才可以上网”等等。而无线智能酒店系统就可以免除这样的尴尬，它主要是通过在酒店布置无线局域网WLAN来提供无线宽带服务，可以在最短的时间内实现酒店的整体接入，不影响酒店的正常营业，尤其是不影响酒店的装修布局。

不同酒店无线网络设计方案

根据星级酒店的特点，要实现包括办公楼、行政楼和客房的大面积网络覆盖。网络结构就会包括不同网络设备和不同的连接方式，同时也包含不同功能特征，以充分满足酒店管理的需要。基于上述所述，网络结构应当针对不同的情况解决不同的问题。合理的网络方案不仅简化网络的管理，而且能够提高网络的整体性能和可用性。

因此，针对酒店面积大的实际情况，酒店无线网络的设计方案一般有两种。一种是楼层之间用有线网络进行连接，多个房间共用一台无线路由器或无线AP；另外一种就是使用无线路由器，通过酒店现有的CATV线路传输无线网络信号，这样只需要在机房安装无线路由器，在客户端安装天线就可以实现无线网络覆盖了。

相比之下，第二种无线网络搭建方案更为可观。因为CATV线路已经成为酒店的标准配置，部署无线网络，只需要加装无线网络信号发射器就可以了，免去布线的烦恼，而且可以节约网络设备投资。因为使用第一种无线网络搭建方案，不仅需要铺设网线，而且需要购买大量的无线路由器，因为在实际应用中，一台无线路由器的信号仅仅能够覆盖3至5间客房。无论是使用效果，还是投资成本，第二种方案都是首选。

此外，从楼外和楼内的不同，还可分为楼外覆盖和楼内覆盖两种解决方案:楼内覆盖方案是指在走廊中央放置1个无线接入设备AP(Access Point)，覆盖整个楼层；另一种楼外覆盖方案，是在楼的一侧侧放置1个AP，增加室外天线，覆盖整个大楼。

典型酒店无线网络解决方案

无线酒店网络系统一般包括酒店无线整体接入、无线大堂吧、无线咖啡吧、无线多功能厅等，提供VOD点播、Internet服务、酒店资源查询等服务。酒店客人无论在酒店的客房、大堂吧、咖啡吧都能够一边品尝咖啡，一边用手提电脑上网冲浪，上网查询当地文艺娱乐活动，或进行网上购物。在众多的无线需求中间，酒店的大厅和会议室无线需求最为具有典型意义，下面我们就这两种情况分别给出相应的解决之道：

酒店大厅无线解决方案：

由于会议室、大厅的特殊情况无法布线，所以这些地方往往成了有线网络覆盖的死角。而且即使想布线，但由于与会人员流动性大、位置、用户数量不固定，这在具体的方案设计、网络的铺设上很难实现。偶尔布一次线也会因为每个会议的规模和与会人数有很大的差别，把我们的网络管理员疲于奔命。而且由于使用有线网络来进行网络铺设，每个用户都必须使用一个双绞线连接到网络的信息插座，这样室内就会网线纵横交错，有时会因为各种原因很可能影响会议的进程，给用户造成不便。完会后，网络撤收也要需要花费大量的人力、物力、时间，这样就造成酒店的核算成本的增加。而采用无线网络就有效避免了这些问题。

一般酒店的大厅面积比较大，如果一个AP不能够覆盖整个区域，我们可以安装多个AP组成微蜂窝网络来覆盖整个区域。而像咖啡厅的面积比较小，所以使用一个AP基本上可以覆盖整个区域。为了能够与整个酒店的网络和Internet 通讯，我们使用5类双绞线把AP连接到酒店的网络交换机。

大厅无线解决方案

在用户端，每个用户都在自己的电脑上安装一块PCMCIA无线网卡，就可以轻松接入到网络中，享受网络给我们带来的方便。而且，用户可以方便地实现在整个区域内自由地不间断通信的移动。整个网络的用户的增减相当方便。

酒店会议室无线解决方案：

根据我们各个不同会议室面积的大小，来选择每个会议室放置几个AP来完全覆盖整个会议室。

会议室无线解决方案

接下来就要选择AP的放置位置，一般选择蜂窝状分布，把AP固定到安装位置，并用双绞线把AP的Ethernet口连接到酒店机房的网络交换机上，把整个无线系统和有线网络完好地结合在一起。与会的每个成员可以方便地将PCMCIA卡安装到自己的电脑上，就可以轻松接入网络，进行数据的传送、信息的交流、在线讨论等等。

第三篇：无线网络优化四大典型案例分析

1.千兆以太网技术优势

在局域网中为了维持直径为200米的最大碰撞区域，最小CSMA/CD载波时间,以太网时间片已从目前的512比特扩展到512字节(4096比特)，最小信息包大小仍为64字节。载波扩展特性在不修改最小包尺寸的条件下解决了CSMA/CD固有的时序问题。虽然这些改变可能会影响到小信息包的性能，然而这种影响已经被CSM/CD算法中称作信息包突发传送的特性所抵消。千兆位以太网最大的优点在于它对现有以太网的兼容性。

同100M位以太网一样,千兆位以太网使用与10M位以太网相同的帧格式和帧大小,以及相同的CSMA/CD协议。这意味着广大的以太网用户可以对现有以太网进行平滑的、无需中断的升级,而且无需增加附加的协议栈或中间件。同时,千兆位以太网还继承了以太网的其它优点,如可靠性较高,易于管理等。

千兆以太网相比其他技术具有大带宽的优势，并且仍具有发展空间，有关标准组织正在制定10G以太网络的技术规范和标准。同时基于以太网帧层及IP层的优先级控制机制和协议标准以及各种QoS支持技术也逐渐成熟，为实施要求更佳服务质量的应用提供了基础。伴随光纤制造和传输技术的进步，千兆位以太网的传输距离可达百公里，这使得其逐渐成为构建城域网乃至广域网络的一种技术选择。

主干采用千兆以太网的好处在于：千兆位以太网将提供10倍于快速以太网的性能并与现有的10/100以太网标准兼容。同时为10/100/1000Mbps开发的虚拟网标准802.1Q以及优先级标准802.1p都已推广，千兆网已成为构成网络主干的主流技术。

1998年六月已制定完成的第一个千兆位以太网标准802.3以使用光纤线缆和短程铜线线缆的全双工链接为对象。针对半双工和远程铜线线缆的标准802.3ab于1999年内出台。

千兆位以太网将提供完美无缺的迁移途径，充分保护在现有网络基础设施上的投资。千兆位以太网将保留802.3和以太网帧格式以及802.3受管理的对象规格，从而将使企业能够在升级至千兆性能的同时，保留现有的线缆、操作系统、协议、桌面应用程序和网络管理战略与工具。

千兆位以太网相对于原有的快速以太网、FDDI、ATM等主干网解决方案，提供了另一条改善交换机与交换机之间骨干连接和交换机与服务器之间连接的可靠、经济的途径。网络设计人员将能够建立有效使用高速、任务关键的应用程序和文件备份的高速基础设施。网络管理人员将为用户提供对Internet、Intranet、城域网与广域网的更快速的访问。

千兆位产品提供商，具有完整的千兆以太网产品线，可契合用户需求提供完整的解决方案。从核心的网络主干交换机到边缘的客户机服务器千兆接入，有针对用户需求设计的高性能的产品。千兆以太网交换机的部署，是一个非常引人注目的技术。目前,许多厂商的交换机把第2层交换和第3层交换融于一体，不论交换还是路由,都能提供至少1000万pps的转发速率，甚至有的产品还可达到2000万pps。这些高性能的特点对于Intranet来讲已显得非常重要，因为传统的局域网流量80/20自然法则(即80%的流量在本地工作组网络内和20%的流量流向骨干网)已经过时。

千兆以太网高速的多层数据包转发能力是千兆以太网技术能提供最好的性能价格比的有力例证。不仅如此，千兆以太网技术对于降低网络的长期拥有成本也是大有裨益的。

2.千兆网交换技术

从1996年底开始，有些公司陆续推出集成了第2层交换和第3层路由的交换机产品,这种技术称之为“多层交换(multilayerswitching)”。它为第2层交换技术增加了路由层服务，支持有选择的广播和组播抑制，支持VLAN及VLAN之间的数据包转发和防火墙功能，全面支持TCP/IP和IPX路由。

经过将近4年时间的发展，这些功能不断地得到了完善和加强,使得多层交换机比传统的路由器的性能价格比高出8至16倍。而新一代多层交换机以千兆以太交换技术为核心,可以提供更加吸引人的性能价格比，是部门级网络和数据中心网络中替代传统路由器的最理想的可以提供多层交换的交换机。同时,其直接传输距离目前已达到130公里，完全可以实现以千兆以太网为骨干的大的企业局域网，骨干传输速率为2Gbps(全双工模式)。

推动技术发展的主要因素推动高速多层交换技术发展的最大因素是采用廉价的10/100M自适应网卡的Internet和Intranet的大量部署。目前的网络已经离传统的c/s计算模式的层次结构越来越远，传统的c/s模式的80/20流量法则已成为过去。在网络设计方面,传统的路由器加Hub或第2层交换机的网络部署模式也将变成历史。

另外，Intranet支持更加复杂的和对带宽敏感的各种多媒体数据流,如数据、文件、图片、动画、声音和视频等。一个Intranet最终用户对带宽的要求至少要比非Intranet用户多50%～100%。同时,宽带接入已成为发展趋势。

另一个值得注意的问题是，为用户提供快速以太网连接可以提供更多的带宽余量来处理突发的交通量，这点是10BASE-T技术无法比拟的。突发流量是IP网络应用的特点之一。廉价和高带宽使得快速以太网不论在用户端还是服务器端都得以广泛的应用。

为了在无阻塞和处理突发交通流量的能力之间取得平衡，新一代交换机平台必须提供高于用户请求连接的8～16倍速率的主干连接，而以千兆以太网为主干正好满足了用户端的快速以太网连接的服务请求。这对于充分处理突发流量非常重要。

同时，在校园网或城域网中，不管跨越几个网络层,对于随机的Intranet交通量都要求提供端到端的持续不变的高性能。为了实现这一点,在一台交换机中同时具备高性能的第2层和第3层转发能力是唯一的解决方案。

无阻塞能力和有选择的转发功能是用户的主要需求。而各种非常有效的网管工具使得网络管理员能够有效且高效地把业务策略注入转发引擎中，其性能可以通过网管软件实时监测。这将从根本上有助于用户根据公司的短期和长期业务发展需要确定和交付所需的网络服务。新一代千兆以太网交换机支持这些特点和服务，同时也支持通用的路由协议,如IP/RIP或IP/OSPF等。这也大大降低了网络设备的复杂性。

3.网络设计的目标及原则

网络系统的高性能要求核心交换机满足网络中心海量数据交换的要求，上连中心的通讯链路带宽能够满足应用对网络的性能要求。不管是企业网还是城域网、广域网，其上的信息应用正以前所未有的速度发展，新的多媒体应用及新的数据应用对带宽提出了更高的要求。以企业普遍采用Intranet网络模式来说，其WWW服务器，FTP服务器，LotusNotes群件应用服务器，NovellServer等服务器群支撑着整个企业的信息服务环境。企业各部门用户客户端应用软件，透过网络访问中心服务器，请求应用，查询数据库。网络的负载流量主要是从边缘设备到核心的数据交换，随着企业业务的发展，网络规模的扩展，以及应用的信息交换量增加，使得企业网络通常首先在核心发生通讯瓶颈现象。改善企业园区局域网的网络数据交换性能，往往是首先扩充核心交换机的交换性能，增加边缘设备到核心的数据通讯带宽，以减轻整个网络的瓶颈，使得应用软件的性能和效率得到提高。因此在设计企业园区局域网的原则上，首先应该考虑满足网络规模所要求的核心设备数据交换处理能力，以及边缘设备到核心的链路带宽。

3.1可靠性与可用性

网络系统设计中的设备高可靠性和系统高可用性；要求核心交换机所有关键部件可以实现冗余工作，可以在线更换(插拔)，故障的恢复时间在秒级间隔内完成。多级容错设计基于单个设备高可靠性的基础之上进一步提高系统的可用性。

就企业应用来说，其通过先进的计算机、网络等信息技术，实现生产过程的自动化控制，无纸办公自动化，提高了企业的生产、管理效率和水平。支持企业应用的基础设施是企业的园区网络，它的工作状况会直接影响到企业的办公应用环境，交易、生产、开发、设计等业务环境，财务管理，部品管理等环境，信息检索、数据库查询、Internet浏览等支持企业正常运行的必要服务设施功能。网络的可靠性要求是保障企业应用环境正常运行的首要条件，网络要求可靠性的同时，要求网络具有高可用性。网络设备的选择，尤其是核心机箱式设备，应该可以配置冗余部件，关键部件不存在单一故障点，也就是说，像交换机的电源、风扇、交换引擎、管理模块这些部件可以冗余备份，其中之一任何部件的损坏，不会影响设备的正常运行，不会影响网络的连通。提供网络设备的可靠性，容错性的另一个要求是设备损坏部件更换时，不需要停机，更换部件后不需要重新启动，也就是说部件的更换可以进行在线操作，这样可以使停机的时间降低到最小。在设计企业园区网的原则上提高网络的高可靠性、高可用性原则是至关重要的，不仅要求设备的部件冗余，同时要求网络的链路冗余，可结合物理层、链路层及第三层技术实现，以保证网络可以在任何时间、任何地点提供信息访问服务。

3.2可扩展性

网络设计的可扩展性要求，包括交换机硬件的扩展能力以及网络实施新应用的能力。核心交换机的灵活扩充性要求：核心交换机应该具备灵活的端口扩充能力，模块扩充能力，满足网络规模的扩充；同时提高性能，满足更高性能的要求。支持新应用的能力：产品具有支持新应用的技术准备，能构方便快捷地实施新应用。

3.3规模与用户

在设计网络的方案时，首先是满足现有规模的网络用户的需求，同时考虑到未来业务发展、规模的扩大，应该设计网络具有用户端口灵活的扩充能力。核心设备是整个网络的枢纽，用户端口数的扩充，需要增加配线间边缘工作组的设备，增加边缘设备的同时，要求连接核心骨干设备的端口数相应增加，因此核心设备应该可以通过增加模块来灵活地增加端口数。核心设备的机箱设计应该具备强大的背板带宽，足够多的负载插槽容量。对于交换机来说，核心交换引擎应该可以满足最大配置下，无阻塞的进行端口数据包交换，模块的扩充不影响交换性能。采用分布式交换结构是实现这一原则的最佳方案，分布式交换机结构实现了交换机的并行数据交换处理，优化了网络的性能，本地交换和全局交换相结合的分布式结构减少了核心交换引擎的压力。因此在设计大规模园区网络的原则上普遍采用分布式交换机实现灵活的模块、端口扩充能力。

3.4安全性

网络的安全性对网络设计是非常重要的，合理的网络安全控制，可以使应用环境中的信息资源得到有效的保护可以有效的控制网络的访问，灵活的实施网络的安全控制策略。在企业园区网络中，关键应用服务器、核心网络设备，只有系统管理人员才有操作、控制的权力。应用客户端只有访问共享资源的权限，网络应该能够阻止任何的非法操作。在园区网络设备上应该可以进行基于协议、基于Mac地址、基于IP地址的包过滤控制功能。在大规模园区网络的设计上，划分虚拟子网，一方面可以有效的隔离子网内的大量广播，另一方面隔离网络子网间的通讯，控制了资源的访问权限，提高了网络的安全性。在设计园区网的原则上必须强调网络安全控制能力，使网络可以任意连接，又可以从第二层、第三层控制网络的访问。3.5可管理性网络的可管理性要求：网络中的任何设备均可以通过网络管理平台进行控制，网络的设备状态，故障报警等都可以通过网管平台进行监控，通过网络管理平台简化管理工作，提高网络管理的效率。

在进行网络设计时，选择先进的网络管理软件是必不可少的。网络管理软件应用于网络的设备配置，网络拓扑结构表示，网络设备的状态显示，网络设备的故障事件报警，网络流量统计分析以及计费等。网管软件的应用可以提高网络管理的效率，减轻网络管理人员的负担。网络管理的目标是实现零管理，基于策略的管理方式，网络管理是通过制定统一的策略，由管理策略服务器进行全局控制的。基于Web的网管界面，是网管软件的发展趋势，灵活的操作方式简化了管理人员的工作。在设计园区网的设备选择上，要求网络设备支持标准的网络管理协议SNMP，同时支持RMON/RMONII协议，核心设备要求支持RAP(远程分析端口)协议，实施充分的网络管理功能。在设计园区网的原则上应该要求设备的可管理性，同时先进的网管软件可以支持网络维护、监控、配置等功能。

3.6协议的标准性

网络设备采用开放技术、支持标准协议：采用标准的协议保护用户的投资，提高设备的互操作性。网络设计所采用的设备要求采用主流技术、开发的标准协议，具有良好的互操作性，能够支持同一厂家的不同系列产品，不同厂家的产品之间的无缝相互连接与通讯。在设计园区网络的原则上，发挥不同厂商产品的专用先进技术同时，必须强调考察设备的技术、协议的标准性，减少设备互连的问题，网络维护的费用，使用户的投资得到有效保护。

应当考虑选择的设备是否是可升级的，在新的标准出现以后，系统应能够升级到新的标准。因而注重产品厂商在相应产品和技术领域内的地位和参与标准化的能力。

当今世界，通信技术和计算机技术的发展日新月异。网络设计既要适应新技术发展的潮流，保证系统的先进性，也要兼顾技术上的成熟性，降低由于新技术和新产品中不成熟因素所带来的风险。

4.校园网解决方案

千兆位以太网最大的优点在于它对现有以太网的兼容性。同100M位以太网一样,千兆位以太网使用与10M位以太网相同的帧格式和帧大小,以及相同的CSMA/CD协议。这意味着广大的以太网用户可以对现有以太网进行平滑的、无需中断的升级,而且无需增加附加的协议栈或中间件。同时,千兆位以太网还继承了以太网的其它优点,如可靠性较高,易于管理等。在园区网主干网中，目前逐步占据了主要地位。

作为校园网应用的一个特点，大部分应用对延迟及带宽不太敏感，可以通过TCP/IP“慢启动”机制自动识别延迟的变化，动态地适应TCP所提供的带宽，部分应用要求实时业务传输支持，QoS服务保障。这部分应用目前所占比例很小，随着教学手段现代化进程的加快，多媒体课件制作工具的逐步普及，多媒体课件的逐步丰富，该比例预期将逐步提高。IP网络传输实时业务的主要瓶颈是路由器采用软件实现路由识别、计算和包的转发，由于路由识别、数据转发的速度慢，时延和时延抖动大，不能保证服务质量(QoS)。自1997年下半年以来，一些公司陆续推出采用硬件专用电路（ASIC）进行路由识别、计算和转发的新型线速路由交换机。这种线速路由交换机的结构与L2交换机相似，兼有L3路由器包转发功能和L2交换功能，有些厂商还在其中加入一些L4应用层功能。在包交换的IP网上提供QoS，必须对服务进行分类，实行分类服务（CoS）。设备生产厂商一般采用拥塞管理保证网络性能，为一些专门的业务提供所要的带宽。一种做法是采用RED（随机早期丢失）探测和智能识别流量的瞬时剧增，将其与真正的网络拥塞区别开来，以避免网络拥塞。通过从IP包头中IPv4服务分类标识（TOS）识别服务类别（802.1P），确定该数据流的优先级，并根据某种队列优先算法以保证QoS的能力。还可使用访问控制表（ACL）定义策略，确定数据流的优先级。随着技术的进步，可以预见，高速IP网络上的QoS能力将达到FR/ATM网类似的水平。

在分析比较市场上多种L2/L3/L4线速路由交换机性能、价格、服务的基础上，选择美国朗讯（Lucent）公司的CajunP550R路由交换机共11台，作为校园网主干交换机。其主要技术、性能指标为：背板能力45.76Gbps交换吞吐能力22.88Gbps第2层交换能力33,000,000pps第3层交换能力18,000,000pps多种L2/L3接口模块冗余风扇、电源OpenTrunk/VLAN互操作性CoS/QoS/RSVP支持

在网络设计中，主干交换机彼此之间通过千兆位以太网互连。所有交换机均配置L3交换引擎，实施分布式的路由策略，从而降低对中心交换机L3路由解析、包转发的压力并控制广播域的范围。网络设计和设备配置中仔细地考虑了设备与线路及路由的物理与逻辑冗余、网络中心服务器群的防火墙设置及安全策略。

第四篇：2013酒店圣诞节场景布置方案

2013酒店圣诞节场景布置方案范文

主题：以营造欢乐喜庆气氛、为酒店宣传突出新年亮点装饰，(以突出重点、制造效果为中心，)

一、重点场景布置区域

1.酒店正门外围(正檐玻璃上“圣诞快乐”彩灯+设计KT板)外厅檐下置一4米高圣诞树，用彩灯围绕+圣诞彩球(购买白色 “KT板”制作“圣诞栅栏”形成一个维护)大门两个柱子用金、红色布包裹(可参考)酒店正门左右茶色玻璃上可用塑料灯管编织简单“圣诞树”轮廓 更显彩灯效果(可参考)

2.酒店大门(用写真制作“圣诞雪景、欢乐图、圣诞老人...”张 贴于外围玻璃上，制造新颖浪漫雪景——详见设计效果图)酒店正门(进门)上檐;(悬挂编织“圣诞长青藤+圣诞彩球”)(两侧亦可布置树藤)

酒店正门(出门厅内)上檐;(悬挂圣诞炫丽布标“圣诞快乐”)

3.电梯(空中用线条悬置圣诞彩球与星星等饰品—1.2.3.豆捞1.2楼)(电梯内悬挂“圣诞快乐”小炫彩横幅及小彩饰品：上方悬挂彩球)

4.“贵宾通道”口：将铁树用彩灯环绕，制成2颗“圣诞树” 电梯内装饰同上

5.吧部(沿用旧式彩带，要求专人统一清洗，再悬挂)

二、节日装束：

1.门童一律穿“圣诞老人全套红服”(食神4人左右2门各2个，豆捞2人，“贵宾通道”1人，保安4人，共11人);

2.前厅所有员工(迎宾、咨客、服务员、传菜员、pA)均戴圣诞帽;3.婚庆公司等应该自行添置与布置节日场景及员工装束，以融 合我们的氛围。

三、执行方案：

11月20日以前确定所有具体方案，22日以前做好所有设计资料，28日以前所有制作材料全部到位，

29——12月1日为实施时间，全部落实到位!

布置实施阶段协作部门：工程部、传菜部、各区域部门

布置实施阶段工作时间：客人进场布置外围，待客时间布置内场

四、为了响应教导型组织精神，特为员工在12月24日晚上组织一场 “欢度圣诞迎新年暨员工生日pATY晚会”(详细另策划)

xiexiebang.com范文网(FANWEN.CHAZIDIAN.COM)

五、新年场景布置(预定计划)

12月10日以前确定所有设计方案;15日以前出所有设计;

25日以前所有材料要求到位;

28日、拆卸“圣诞”题材设计，保留部分设计，如彩灯等;29、30、31为“马年快乐”新年主题安装!

第五篇：大数据的典型应用场景及展望

大数据的典型应用场景及展望

2015年1月24号，2015 China Hadoop Summit技术峰会在北京如期举行。本次大会作为国内大数据行业最具影响力的IT大会，吸引了众多从事Hadoop研究与推广的权威技术专家、Hadoop技术爱好者和IT厂商前往参加。

现任星环信息科技(上海)有限公司联合创始人兼首席技术官，曾任英特尔数据中心软件部亚太区CTO的孙元浩老师在本次大会上带来了主题为《2014年大数据的典型应用场景及展望》的分享，本文主要针对目前Hadoop主流应用场景，实时流数据的处理以及大数据技术给未来生活的设想等内容进行了整理。

四年前的硅谷，风投埃里森拿出一亿美金来投资大数据公司，他认为Hadoop技术在未来的若干年中会从底层的数据平台，从传统的关系型数据库进行迁移。数据的分析层会被全新的数据分析工具所替代，可视化层和应用分析会有更多的新工具出现，并认为这个市场将达到几百亿美金的规模。

过去几年，Hadoop的发展非常迅猛。我们常讲大数据的四V特征，Hadoop在大数据处理上表现出的处理量、性能、挖掘能力的提升和碎片化处理能力，使其得到越来越广泛的应用。

一、Hadoop的主流应用场景：数据仓库的主要组成部分

传统的企业有若干个主机，用于销售、运营管理等等，产生的数据首先经过ODS层，将数据从多个业务系统中集中起来，进行清洗、转换等集成操作，然后将过加工的数据进入企业IT架构的核心——数据仓库进行统计、挖掘和分析。最后用可视化工具进行展现。这是传统的企业数据仓库的架构，经常采用主流的甲骨文等数据库技术来实现。

Hadoop作为数据仓库组成部分的四个驱动力

互联网公司早年的时候，是把Hadoop做在数据仓库的核心，比如Facebook早期的时候是从服务器采集是通过实时的日志的采集工具，经过Hadoop把Hadoop作为数据分析工具，呈现把结果放在甲骨文中做展现。

互联网公司之所以这么做，是因为互联网数据量大到在传统的数据库不能处理。现在传统的企业也面临同样的问题，将Hadoop作为数据仓库主要组成部分有四个驱动力：

效率：传统的数据仓库技术已经面临非常繁重的数据分析任务，处理的延迟从一天到了一周。

成本：传统的数据架构成本动辄几千万。Hadoop可以实现成本若干倍的降低。

数据来源多样：视频、音频等企业非结构化数据来源增多。MapReduce对于非结构化或半结构化数据的读取非常有效。

数据分析需求的演进： 数据分析不再只满足于统计。使用Hadoop的技术，能够对数据进行深度的挖掘和分析，实现对未来的预测。

Hadoop改变企业数据仓库架构的线路图 第一步：数据仓库的补充 2011、2012年的时候 Hadoop主要是作为数据仓库的补充在做数据的清洗。这一层Hadoop很擅长。Hadoop的优势是能够把计算任务对全要素进行统计分析，这是方式非常适合简单的场景，早年Hadoop的最佳用途是作为ETL的平台，第二步：逐渐进入核心

随着Hadoop生态系统逐渐完善，有更多的数字化工具支持Hadoop，Hadoop开始进入数据仓库的核心领域。有些企业开使用Hadoop来直接做数据可视化，在有些行业中已经开始用Hadoop逐渐取代传统的关系数据库来建立数据仓库。从整个的数据仓库的架构来看，有一半的架构已经开始被Hadoop覆盖了。

第三步：Hadoop使资源管理变为可能，最终将取代企业完整的整据仓库

在一两年之内有些企业完整的数据仓库架构都可能会被Hadoop取代掉。

过去企业数据仓库的时候任务很繁重，系统效率低下。造成这种状况的重要原因是，客户把过多的负载放在数据仓库上面，数据仓库本身又没有资源配合的方式。

Hadoop2.0推出了管理框架，使得资源管理变成了可能，使得数据仓库支撑多个部门的数据分析和访问更加高效。举例来说，每个部门的业务都是动态创建虚拟集群实现的，每个集群都有一定的资源配额，这样的配额用时不会超过这个配额，使得用户任何的负载不会影响其他的用户，这成为数据仓库里一个重要的实现，数据仓库完全平滑，24小时不间断运行的保障。过去上千人在访问Hadoop的时候，也是通过调度机制实现的，随着Hadoop2.0的出现和资源管理能力的提升，通过资源管理层可以方便的配置资源。

我们可以设定CPU的内存和存储资源，每个部门使用的时候有配额的最低保障。当另外一个部门的用户上线使用的时候，比如创建了一个集群，这时会把你的部分资源还给后面的第二个用户，原来第一个用户的资源被收缩了，更多的用户进来的时候，第一个用户的资源被进一步收缩，收缩到一个最低的指标。一方面充分保障了每个用户最低资源的配额，第二也保证系统整体运行的情况下可以充分有效利用整体的计算资源。

二、随着云计算和物联网的逐渐兴起，实时流数据的处理将成为关注重点

云计算和物联网使得数据呈现两个主要特点。首先，数据在没有人工干预的情况下24小时不间断的产生；第二数据并发量高，使得单一的统计已经不能满足用户要求，对数据模式的分析和深度挖掘的要求增强

现在的大数据处理不光需要做统计，而是需要做机器学习，快速地检测出异常的状态。

比如在交通行业部署的实时监控平台，这是一个发展得比较成熟的案例，在全国已经得到了广泛部署。其主要用途是把路面上装的摄像机的照片和分析出来的车牌等信息，实时的传送到中心的大集群中，然后把所有的车流信息实时汇总至省级集群部署，通过流处理形成实时的应用，比如说区间测速、实时路况、公安部实时布控的应用等。相关数据也会进入到数据库，对外提供车辆轨迹的查询，实时路况的检索，比如行车分析和交通管理的应用等。

过去在常见的部署架构中由数据集群做实时的处理时，包括应用和查询的功能，数据会经过蜂窝队列，分布量是非常高的，单节点的服务器可以支撑一秒钟十万条结果的插入，基本上是满负荷。

传统的流处理加上Hadoop，可以解耦前端应用和后端的分析应用。由于分布队列的吞吐量很高，可以在几百万个地方写入，可以基本满足上千万传感器同时传送峰值的压力，后端的是流处理的引擎做数据分析。

我们把数据流按时间切片，每个小切片一百毫秒左右。我们需要在数据经过这个流的时候在流上直接做异常检测，包括多种算法，最基本的是希望将这些算法直接移植到流上，实现流式的异常检测。这里面有一个挑战是，刚开始出现的异常可能并不准确，尽量要避免误报的情况，通常会用SQL来做聚合和预先的数据处理，而Spark可以实现小片的批处理流程，我们在小的批量上能够实现延迟是一秒钟内可以发出告警。

这种方式的好处是可以对实时数据和历史数据实现综合的分析，都同在一个数据库中，可以在上面用完整的统计分析的挖掘，包括可以做计算和预测，这些分析超出了以前统计的范畴，而且需要历史数据和实时数据进行统一的分析。这个领域今年可能会是比较热门的领域，预计这个模式在物联网实时处理上得到更加广泛的应用。

三、大数据技术能给我们的生活带来什么 我们把数据源分两大类：

1.人的行为产生的数据：包括网上购物、通过运营商通话、发微信都会留下数据，这些分析无外乎是给客户提供更好的服务，或者是帮助商家更准确的找到客户进行精准营销；

2.机器产生的数据：帮助发现一些客观规律，比如说交通的模式是怎样的，用电的消耗量和气侯和电网的关系是怎样的，也对数据进行分析和能够做实时报警和诊断优化生产线的流程提供依据。

数据分析和挖掘开始出现，目前还不是主流。大数据描绘的场景是能够进行预测，这逐渐开始成为事实。人流密度实时预警

比如通过对基站的数据基本上可以比较粗的定位人的大致位置。通过对数据进行密度的统计，可以非常迅速的找出区域内部密度的值，基础值是每个基站每英里多少个用户数，这是基站可以提供的数据，利用这个数据可以非常快的知道人群的密度。

也可以利用银联的数据，我们的合作伙伴用银联的数据把上海的商圈都找出来了，商圈是根据过去三个月银联的刷卡记录，根据消费额、消费地点以及消费商户的类别进行统计的，上海14个商圈是比较密集的，有些商圈我们也没去过，比较偏远的反而是商圈。上海的架构看基础是卫星城的架构，和北京不同，周围有很多密集的商圈。这个数据也可以做人群的预测，商圈是人群密集的地方，随着踩踏事件的出现，公安的客户也来找到我们，发现这个数据对他们很有用，因为我们可以统计节日间实时的刷卡记录，可以判断晚七点到九点消费集中的区域，这些区域是人 垃圾短信分类

利用流式的机器学习做垃圾短信的分类，在流上做实时的检测，速度是非常快的，可以流上实时的实现。运营商所有的短信经过流式系统可以迅速的判断出哪些消息是垃圾短信，来净化现在运营商的垃圾短信泛滥局面。消费者行为预测

机器学习类：协同过滤、相似度主要是比较商品间的相似程度进行推荐，一些新的应用也比较有趣，像是基于时序关系的预测。每次消费行为和时间是有关的，一个人经常跑到陆家嘴有一个明显的地方，带着小孩会去海洋公园玩一下，有时看东方明珠看一下，然后去正大广场吃个午饭，这是统计出一个模式，这是时序相关性，我们可以对客户推送一些比较精准的广告。总结

我们看到Hadoop主要的用途是数据仓库中，未来会逐渐的开始把更多的负载牵到上面来；第二物联网逐渐的兴起，针对一些挑战我们需要在流上做更强的分析和机器学习，这种新的架构也层出不穷；第三是全新的集群的应用。可以预见的是，随着云计算和物联网等技术的不断发展，利用大数据的分析能力实现对未来的洞察将逐渐成为现实。【编辑推荐】

大数据时代之hadoop：了解hadoop数据流（生命周期）惠普携手青岛打造大数据应用及产业示范基地

Apache Hadoop 2.6.0发布——异构存储，长时间运行的服务与滚动升级支持

Hadoop RPC通信Client客户端的流程分析

Spark 1.2：向MapReduce在Hadoop中的统治地位发起挑战