细数阿里云服务器的十二种典型应用场景

第一篇：细数阿里云服务器的十二种典型应用场景

细数阿里云服务器的十二种典型应用场景

本文章来自于阿里云云栖社区

摘要： 文章转载：小白杨1990 如今，阿里云的产品可谓是多种多样，纷繁复杂。面对各种各样的技术和产品，ECS、RDS、OSS…等等一系列的东西，很容易让人找不到头绪，尤其是刚刚开始接触网站建设的朋友。阿里云湖北授权服务中心武汉捷讯结合阿里云官网的资料，针对建站相关的内容为大家整理一些阿里云典型的应用场景

免费开通大数据服务：https://www.xiexiebang.com/product/odps 文章转载：小白杨1990 如今，阿里云的产品可谓是多种多样，纷繁复杂。面对各种各样的技术和产品，ECS、RDS、OSS…等等一系列的东西，很容易让人找不到头绪，尤其是刚刚开始接触网站建设的朋友。阿里云湖北授权服务中心武汉捷讯结合阿里云官网的资料，针对建站相关的内容为大家整理一些阿里云典型的应用场景，以及每一种应用场景主要涉及的技术，给大家提供一个参考。相信看完本文，大家都能清楚的知道自己要实现的应用大概会需要用到什么样的服务和产品。

典型应用一些典型应用中可能涉及到的产品和概念

（一）一站式建站

阿里云提供域名和云解析服务，云市场还提供全程建站服务。小型网站只需一台云服务器ECS即可。

1、域名注册：国内域名市场NO.1,19年专业域名服务，超30种域名供您选择；

2、云解析：提供安全、稳定、极速的域名解析服务，每天超百亿次解析响应；

3、免费备案：人脸识别，备多久云服务器免费送多久；

4、建站服务：服务全程监管，不满意全额退款；

5、云服务器：可弹性伸缩、安全稳定、简单易用。

（二）随时灵活扩展

建议使用过弹性伸缩结合云服务器，实现在业务增长/下降时自动增加/减少云服务器实例。

1、网站初始阶段访问量小，应用程序、数据库、文件等所有资源均在一台云服务器上，节省初创成本；

2、用户使用镜像可免安装快速部署，提供php、Java、asp、asp.net等运行环境；

3、当您开始营销推广，网站流量可能会出现成倍的增幅，使用台云服务器可以在几分钟内完成扩容，轻松应对，搭配负载均衡，实现水平扩容；

4、如果你的业务存在明显的波峰/谷，或无法预估流量波动，建议使用过弹性伸缩，实现在业务增长/下降时自动增加/减少云服务器实例。

（三）加快访问速度

OSS与CDN搭配，解决网站海量图。OSS与CDN搭配，解决网站海量图片存储问题片存储问题

1、不同地区的用户访问网站出现延时问题时，可使用CDN加速，CDN在国内有500+节点，海外有30+节点，覆盖教育网、电信、移动、铁通、联通、鹏博士等运营商；

2、如果您的网站有大量静态资源，建议将站点内容进行动静分离，使用CDN结合OSS存储海量静态资源，有效加速内容加载速度，轻松搞定网站图片、短视频等内容分发；

3、如果您的网站业务包括视音频点播、大文件下载（如安装包下载），建议使用CDN搭配OSS，提升回源速度，节约近2/3回源带宽成本。

（四）海量图片存储

OSS与CDN搭配，解决网站海量图。OSS与CDN搭配，解决网站海量图片存储问题片存储问题

1、使用云服务器存储大量图片存储及带宽成本较高，您可以使用CDN，CDN搭配OSS支持直接写入或读取数据，包括流式写入和文件写入两种方式；

2、如果您的网站有大量静态资源，建议将站点内容进行动静分离，使用CDN结合OSS存储海量静态资源，有效加速内容加载速度，轻松搞定网站图片、短视频等内容分发；

3、如果您需要对海量图片加速分发，建议使用CDN搭配OSS，大幅加速分发，降低成本。

（五）应对高并发

阿里云提供负载均衡搭配云服务器，应对任意并发压力，也可以通过开放缓存服务对热点数据进行缓存，在数据层可用DRDS实现分库分表。

1、在Web层，自己搭建并维护负载均衡系统成本较高。阿里云提供的负载均衡搭配云服务器，实现水平扩容，理论上可应对任意并发压力，较传统技术更简单易用；

2、在静态资源方面：高并发带来的访问性能等问题，可以通过CDN加速静态文件访问解决；

3、在缓存层：大部分网站访问都遵循28原则，即80%的访问请求，最终落在20%的数据上。因此，可以使用OCS对热点数据进行缓存，减少这些数据的访问路径和数据库的压力；

4、在数据层：用RDS实现读写分离、用DRDS实现分库分表，可以轻松解决高并发带来的容量和性能问题。

（六）网站防攻击

云盾基础防护免费提供最高5G的默认DDoS防护能力和应用防护能力，针对暴力破解行为可用安骑士，针对大流量DDOS攻击可用高防IP

1、网站是最容易遭受攻击的应用类型，黑客通过真实服务器发起DDoS攻击或者CC攻击很容易就能使网站陷入瘫痪，云盾基础防护免费提供最高5G的默认DDoS防护能力和应用防护能力；

2、遭受大流量的DDoS攻击后，用户可以通过配置高防IP，将攻击流量引流到高防IP，确保源站的稳定可靠；

3、针对暴力破解等行为，安骑士可在云端处理中心实时对所有插件的数据进行汇总和分析，若匹配到暴力破解行为则会立即对该IP进行拦截，保障服务器不被黑客暴力猜解密码。

（七）数据备份

云服务器支持创建快照来做数据备份，OSS提供静态文件的三重备份，阿里云的云数据库RDS提供自动和手动两种备份方式，每天自动备份数据并上传至对象存储OSS。

1、服务器数据备份：云服务器支持手动或自动创建实例的快照，保留某个时间点上的系统数据状态，作为数据备份，或者制作镜像，每个磁盘拥有64个快照quota；

2、静态数据文件备份：OSS提供三重备份，故障自动恢复能力，保障数据可靠性99.99999999%；

3、数据库备份：阿里云的云数据库RDS提供自动和手动两种备份方式，每天自动备份数据并上传至对象存储OSS，提高数据容灾能力的同时有效降低磁盘空间占用。

（八）搜索/推荐

开放搜索服务将专业搜索技术简单化、低门槛化和低成本化，也可以使用推荐引擎结合MaxCompute

1、自己搭建、优化搜索引擎应用需要较高的技术成本，开放搜索服务将专业搜索技术简单化、低门槛化和低成本化；

2、如果需要搭建自己的个性化推荐系统、实现『千人千面』的精准营销，可以使用推荐引擎结合MaxCompute，实时预测用户对物品偏好的数据工具，且企业定制个性化推荐算法，助力企业实现商业目标。了解更多阿里云大数据计算服务MaxCompute点击https://www.xiexiebang.com/product/odps

（九）网站迁移

您可采用数据迁移服务，将本地数据库迁移到阿里云上，也可用ossimport2将本地静态文件同步到对象存储OSS中，您也可以直接使用云市场的网站迁移服务。

1、备案转入：如果您想将已备案的网站迁入阿里云，仅需6步，就可免费实现，备多久云服务器免费送多久；

2、数据库迁移：如果要将本地数据库迁移到阿里云上，可以使用DTS的增量迁移功能，不影响本地业务继续提供服务，从而最大程度降低数据迁移期间应用停服时间；

3、静态文件迁移：ossimport2可以将您本地或第三方云存储服务上的文件同步到对象存储OSS上，支持多种文件迁移方式；

4、云市场提供的网站迁移服务，可以帮助您省心省力实现迁移。

（十）可视化分析

MaxCompute可以与ECS，ADS/RDS以及其他BI报表工具等配合使用，完成用户BI分析的需求

1、个性化广告推广可以大幅提高推广销量，MaxCompute可以完成更为复杂的机器学习、数据挖掘等分析。帮助用户实现个性化推荐等广告推广场景，此外还可以完成BI报表等需求；

2、数据可视化（DataV）可以帮助非专业的工程师通过图形化的界面轻松搭建专业水准的可视化应用，满足日常业务监控、调度、会展演示等多场景使用需求。

（十一）服务全球客户

建议购买阿里云服务器ECS的海外节点部署业务，不同地区的用户访问网站出现延时问题时，可使用CDN加速，CDN在国内有500+节点，海外有30+节点。

1、您的客户可能位于世界上任何地方，使用阿里云可以在每一个地理区域拥有一处托管您网站的数据中心，包括美西、中东、亚太，而这一切只需点点鼠标就能完成。

2、不同地区的用户访问网站出现延时问题时，可使用CDN加速，CDN在国内有500+节点，海外有30+节点，覆盖教育网、电信、移动、铁通、联通、鹏博士等运营商；

3、如果您的网站有大量静态资源，建议将站点内容进行动静分离，使用CDN结合OSS存储海量静态资源，有效加速内容加载速度，轻松搞定网站图片、短视频等内容分发；

4、如果您的网站业务包括视音频点播、大文件下载（如安装包下载），建议使用CDN搭配OSS，提升回源速度，节约近2/3回源带宽成本。

（十二）网站搭建

您可将业务部署在阿里云服务器上，建站过程中阿里云市场也提供百款优质精美网站模板，三分钟即可建站。同时您也可联系专业建站团队，定制个性化网站。

1、百款优质精美网站模板，含网站空间及流量，企业官网3分钟急速拥有

2、电子商务，选择专业建站团队，快速搭建个性化网站

3、离你最近的企业网站服务，按区域就近选择，服务更贴心

4、高端定制网站，专属设计师团队，彰显品牌形象

5、移动网站建设，定制手机官网，布局移动互联网。

第二篇：阿里云服务器搭建OA服务器

阿里云服务器搭建OA服务器

首先到阿里云官网 http://www.xiexiebang.com 购买云主机。

最新版本思道OA 2015 支持Windows Server 2003/2008/2012全系列（32位和64位），支持ASP.NET 4.0（兼容4.5），原生支持64位，64位意味着更高的性能和执行效率。

思道OA官网下载

http://www.anyoffice.net 注：

思道OA 2015是原生64位程序（同时兼容32位），64位理论上支持128G内存，性能超强的。

市面大多数OA产品程序是32位的，32位程序理论最大支持4G内存（通常为3G内存左右），现在的硬件配置和价格，32位程序明显路后，甘拜下风。

很多客户采购的服务器配置8G内存或更高内存，只有64位才能利用。

阿里云提供的Windows Server操作系统非常全，笔者抄录了一下，未来阿里云可能会有更新。2003 R2标准版 SP2 32位中文版 2003 R2标准版 SP2 64位中文版 2003 R2标准版 SP2 64位英文版 2008 标准版 SP2 32位中文版 2008 R2 标准版 SP1 64位中文版 2012 标准版 64位中文版 Beta

操作系统如何选？

(1)技术习惯，如果您擅长Windows 2003就选择Windows 2003，笔者推荐Windows 2008，如果想玩玩Windows 2012也是可以的。(2)32位还是64位，取决于费用预算，如果上64位至少选择4G或更高，1G-2G内存就老老实实选择32位吧。

小微企业入门最低配置：

如果是入门用户配置：1核CPU、1G内存、Windows 2003/2008 32位、2M带宽、98元/月，也是可以的满足一般小微企业版 50用户的。

中档配置：

2核CPU、4G内存、Windows 2003/2008 32位或64位、5M带宽。

高端配置：

4核以上CPU、8G以上内存、Windows 2008 64位、10M带宽。

阿里云服务器硬件配置界面，如下图：

选择好硬件配置，选择立即购买，付款后大概5-10分钟，服务器就开通了。

（二）思道OA 2015 软件安装

访问思道OA官网 http://www.anyoffice.net 下载思道OA 2015安装包，参考思道OA安装指南进行安装即可。

思道OA官网下载地址：

http://www.anyoffice.net/download

思道OA 2015安装指南

http://www.anyoffice.net/help/install

第三篇：阿里云服务器购买流程,阿里云ECS代购流程

阿里云服务器购买流程，阿里云ECS代购流程

本文为大家详细介绍阿里云服务器如何购买，以及阿里云服务商客户的代购买操作流程。

1、提供注册邮箱，发送邀请注册邮件，邀请注册账号（可以省去充值认证流程哦）；

2、登陆邮箱，查看激活邮件，点击链接完成注册流程；

3、根据关联邮件注册您的阿里云账户；

4、账号注册完成后，选购服务器配置

大部分配置可以根据自己的需求来选择就好啦！如果不知道如何选择也可以咨询我们阿里云服务商-云多多网络。Q,Q, 3304559116 VX:yunduoduo558

需要注意的地方：

地域选项：如果我们的域名备案了，就选择国内地址（华北，华东，华南均可），如果我们的域名没有备案就选择香港，新加坡，美西，美东均可，国外地区不需要备案，购买后直接就可以使用，直接绑定域名就可打开你的网站了。

公共镜像：就是让我们选择阿里云服务器的操作系统，一般都是选择windowsserver。版本一般选择2012标准版即可，记得要选中文。

设置登陆密码：就是远程登陆阿里云服务器的密码，如果密码后来忘记了，也可在阿里云网站后台重置密码即可。如果不喜欢远程登陆，也可在阿里云网站后台进行网页版登陆，购买阿里云服务器后，网站后台就自动给你开通了。

5、最后点击立即购买，选择付款方式后不要支付，联系您的销售经理将您的交易ID或阿里云账户给他

以上就是阿里云服务器的代购操作流程，相信大家都明白了吧。

第四篇：中国移动云网融合应用场景及解决方案

附件2

中国移动云网融合应用场景及解决方案

“移动云”是中国移动自主研发，面向政府部门、企业客户和互联网客户推出的新型云计算平台，提供弹性计算、云存储、云网络和云安全等基础设施产品，数据库、视频服务等平台服务产品，并通过云市场引入海量优质应用。结合专线、CDN等运营商优质网络资源，提供一站式定制化政务云、行业云、混合云等解决方案，中国移动拥有规模庞大的客户群，利用移动云的资源与网络，可以更好的为客户服务，促进客户业务发展。国务院国家政务云、湖南省政府政务云都选择使用中国移动“移动云”。

一、云主机 1.1、产品定义

云主机是通过虚拟化技术整合IT资源，为客户提供按需使用的计算资源服务。客户可以根据业务需求选择不同的CPU、内存、存储空间、带宽以及操作系统等配置项来配置云主机，通过灵活的计价方式和细粒度的系列化配置，提高资源利用率和稳定性，降低客户的使用成本。

1.2、产品特点

(1)快速部署：客户可以随时申请资源，云主机从申请到生成— 1 —

仅需数分钟时间，快速投入使用

(2)弹性灵活：多台云主机即开即用，灵活扩容，支持CPU、内存垂直升级，最大程度满足业务弹性需求，客户可以根据业务需求订购相应规格的云主机，降低使用成本

(3)简单易用：客户可以通过控制台完成对云主机的全项指标监控与全生命周期管理，操作简单

(4)稳定可靠：云主机可用性不低于99.95%，提供宕机迁移、数据备份和恢复等功能，确保业务稳定。云主机备份数据以多副本形式保存，数据可靠性可达99.9999999%(5)安全保障：提供密钥认证、安全组防护、防火墙防护、多用户隔离等手段，确保业务安全

(6)无缝拓展：云主机与移动云各种丰富的云产品无缝衔接，可持续为业务发展提供完整的计算、存储、安全等解决方案

1.3、应用案例

出版发行集团：中国移动协助发行集团提供电商服务，建设完成集图书及多种商品销售、线上线下销售模式，众多商家共同经营的大型电子商务平台（官网http://www.bxmedia.net/）。

二、云存储 2.1、产品定义

云存储是在云计算概念上延伸和发展出来的一个新的概念，是一种新兴的网络存储技术，是指通过集群应用、网络技术或分— 2 —

布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的系统。移动云存储涵盖对象存储、云硬盘、云空间等。

对象存储是移动云提供的具有大容量、高安全、高可靠、低成本等特点的存储产品，用于存储图片、音视频、文档等非结构化数据；

云硬盘是为主机提供的高可靠、高并发、低延时、大容量的块存储产品；

云硬盘备份是为云硬盘提供的备份产品，备份数据存储在对象存储上，可以跨系统容灾，保护核心数据永不丢失。

云空间是面向企业级用户的云应用产品，在解决企业员工文件存储需求之外，还支持文件共享、文件多版本、后台管理等功能，可以更好的保护企业数据的私密性，并方便企业的文档协作管理。

2.2、产品特点

对象存储：海量空间、按需扩展、稳定可靠、高安全性、操作方便

云硬盘：灵活部署、高性能、海量存储、高可靠

云硬盘备份：按需使用、数据可靠、经济实惠、简单易用 云空间：灵活、可靠、安全、支持严格完善的权限控制及日志记录，保证数据变动时，明确划分责任

2.3、应用案例

胶片数字化项目：胶片数字化项目是“国家历史影像档案工程”中一部分，主要是音视频文件的存储，是国家批准立项资金支持的项目。移动云为胶片数字化项目提供大规模分布式对象存储服务，国际信息港、长沙核心节点和和南方基地资源池形成异地互备，为存储文件提供多重保险；移动云为此项目提供的有效存储容量达几十PB，数据可靠性高达99.999999999%。

三、云网络 3.1、产品定义

云专线：依托中国移动覆盖全国的传输网络，为客户提供的数据专线，实现云资源与用户本地数据中心安全稳定的连接。

虚拟私有云(VPC)：基于先进的SDN（软件定义网络）技术，使用户能够构建独立的网络空间，并通过虚拟防火墙和安全组功能提高网络安全性，同时可以灵活部署混合云。

弹性公网IP：为客户提供静态公网IP地址资源，可以灵活绑定云主机或弹性负载均衡器，自由调整带宽，实现云主机的互联网接入。

弹性负载均衡：将来自公网的业务访问流量分发到后台云主机，可选多种策略，并支持自动检测后端云主机健康状况，消除单点故障。

内容分发网络（CDN）：通过遍布全球的内容边缘节点、内部— 4 —

专用线路以及完善的网络路由调度机制为用户自动选择最佳网络访问路径，提供更快、更稳定、更便捷的网络访问体验。

3.2、产品特点

灵活方便：弹性公网

IP 可以灵活与云主机或弹性负载均衡进行绑定或解绑

按需扩展：公网IP 的带宽支持不同规格，用户可随时调整带宽大小

高可用：网络可用性为99.95% 丰富节点资源：节点覆盖全球多个国家，全国31 省和多运营商

电信级可靠性：提供7*24 小时运维服务保障

智能精准调度：智能调度系统选择最优节点和最优网络提供服务，保障终端用户获得最优体验

3.3、应用案例

中国移动为湖南卫视芒果TV、腾讯视频、中国建设银行等客户提供了移动云+CDN云网融合综合解决方案，助力客户快速部署系统，同时降低部署成本，构建弹性灵活的平台，流量超过50Tbps+。

四、云视讯 4.1、产品定义

云视讯是中国移动全网运营的会议产品，基于专业会议终端

提供高品质、专业级视频会议解决方案。系统一点建设、服务全网，提供语音、多媒体、高清三类会议服务，兼具媒体播报功能，通过客户端、手机、固话等丰富的会议终端系列全面覆盖客户需求。

4.2、产品特点

全IP技术：基于IMS网络，与现网传统语音、VoLTE音视频通话业务无缝融合，语音、视频均可入会

集中部署：云视讯会议平台、媒体处理模块均集中部署，减少企业投资

主打高清：支持1080P/60帧高清双流，视频逼真、流畅

融合体验：高清终端、固话、手机、电脑终端均可入会

终端丰富：硬终端包括网真 T、专业 P、一体化 I、低成本C四个系列，软终端客户端可安装在手机和电脑上，全面覆盖客户需求

4.3、应用案例

截止2018年5月23日全省已签约的云视讯会场数1300个，客户单位涵盖党政机关（组织部、综治办、信访局、扶贫办、应急办、质量监督局、农业局、林业局等），金融银行、国电电力、企业单位等，其中宁乡市、张家界慈利县均实现了县-乡-村的全覆盖，打造了“智慧党建”、“云视+综治”、“云视+信访”、“云视+精准扶贫”等多个标杆案例。

五、云 MAS 5.1、产品定义

云MAS是通过部署在移动侧的集中建设、集中运营、集中维护的消息类业务平台，满足客户的消息发布及互动需求，为集团客户提供基于移动终端的应用服务的信息化产品。

5.2、产品特点

1）三网短信发送能力，业务开通速度较快； 2）具备模板短信、短信、彩信发送功能；

3）提供SDK接口发送短彩信的能力，支持多种开发语言，满足客户个性化的接入需求。

5.3、应用案例

云 MAS 业务于 2017 年 6 月正式商用，截止至 2017 年 10 月，客户数量达 3 万余户。

六、移动办公云 6.1、产品定义

移动办公云，专注为企业解决办公协同、提供一站式企业服务和开放聚合解决方案, 从人、钱、事、信息等多个维度，提供企业内部管理的解决方案，让企业以更低的成本，更简单的操作，实现信息化、移动化的管理，实现更高效的企业内部协作。包括办公协同、业务中心、智能硬件与移动业务整合、企业服务和应用聚合等多个方面的应用模块。

6.2、产品特点

操作便捷：以最人性化的设计理念，遵循用户操作习惯，方便用户更快捷地进行操作，所有工作一个APP搞定

沟通高效：关联企业通讯录，可直接选择成员，发起群聊，同时拥有“必达消息”，与短信同步发送

安全保障：DDOS防护系统，加密HTTPS协议，已通过ISO27001：2013信息安全认证

成本低下：公有云几乎零成本使用，可帮助企业解决费时费力地协同问题，高效办公

智能云服务：拥有强大的智能技术研发团队和数据存储系统，让每一步都做到数据跟踪，有据可依

6.3、应用案例

目前产品广泛应用于党政机关、企事业单位、中小企业，在传统工业制造、互联网、教育培训机构等各行业均有广泛应用，目前省内注册用户已达700万。

七、云迁移服务 7.1、服务定义

移动云业务产品丰富，可为客户搭建一站式个性化的解决方案，可以满足不同需求客户。帮助企业把应用和数据从本地服务器或其它云平台迁移到移动云平台；同时通过调研、分析以及评估企业业务需求，提供专业的解决方案，帮助企业对业务系统进— 8 —

行云化。

7.2、服务特点

引入了大量云计算方面运营和运维优秀人才，利用自主研发的技术优势，构建了强大的运营和运维支撑团队，充分发挥中国移动现有的运营支撑网络优势和属地化服务体系，能够为客户提供售前支撑服务、售后服务和技术保障支持服务。

7.3、典型案例

提供针对政府、金融、医疗、教育、互联网等多个行业的个性化解决方案，提供一站式定制化政务云、行业云、混合云等解决方案。典型案例如国务院政务云、湖南省政务云、以及“津云”一期中央厨房指挥中心及数据中心集成。

八、云客服 8.1、产品定义

云客服，以通信和云计算为基础，具备全渠道全触点接入、优质的网络与号码资源、大数据及智能化应用的智能联络平台。致力于为企业快速搭建属于自己的客服平台，提升客服工作效率，降低管理成本，让企业的客户服务成为新的商业价值。

8.2、服务特点

企业级云服务类客服平台，致力于为企业提供多种渠道的接入模型和服务模式，并借助10086热线成熟领先的管理经验和管理手段，最终统一融合成对外提供的行业客服产品体系，产品功

能包括多渠道接入、工单系统、客户中心（CRM）、人工智能、能力支撑、坐席管理、监控管理等。帮助企业客服人员在不同环境随时随地响应客服请求，真正实现7×24小时客户服务。

8.3、典型案例

目前广泛被社会各行各业应用于自身客户联络中心的解决方案，市民热线、大地保险、美的等多家大型企业的云客服系统需求，已开通呼叫坐席2000+坐席。

第五篇：大数据的典型应用场景及展望

大数据的典型应用场景及展望

2015年1月24号，2015 China Hadoop Summit技术峰会在北京如期举行。本次大会作为国内大数据行业最具影响力的IT大会，吸引了众多从事Hadoop研究与推广的权威技术专家、Hadoop技术爱好者和IT厂商前往参加。

现任星环信息科技(上海)有限公司联合创始人兼首席技术官，曾任英特尔数据中心软件部亚太区CTO的孙元浩老师在本次大会上带来了主题为《2014年大数据的典型应用场景及展望》的分享，本文主要针对目前Hadoop主流应用场景，实时流数据的处理以及大数据技术给未来生活的设想等内容进行了整理。

四年前的硅谷，风投埃里森拿出一亿美金来投资大数据公司，他认为Hadoop技术在未来的若干年中会从底层的数据平台，从传统的关系型数据库进行迁移。数据的分析层会被全新的数据分析工具所替代，可视化层和应用分析会有更多的新工具出现，并认为这个市场将达到几百亿美金的规模。

过去几年，Hadoop的发展非常迅猛。我们常讲大数据的四V特征，Hadoop在大数据处理上表现出的处理量、性能、挖掘能力的提升和碎片化处理能力，使其得到越来越广泛的应用。

一、Hadoop的主流应用场景：数据仓库的主要组成部分

传统的企业有若干个主机，用于销售、运营管理等等，产生的数据首先经过ODS层，将数据从多个业务系统中集中起来，进行清洗、转换等集成操作，然后将过加工的数据进入企业IT架构的核心——数据仓库进行统计、挖掘和分析。最后用可视化工具进行展现。这是传统的企业数据仓库的架构，经常采用主流的甲骨文等数据库技术来实现。

Hadoop作为数据仓库组成部分的四个驱动力

互联网公司早年的时候，是把Hadoop做在数据仓库的核心，比如Facebook早期的时候是从服务器采集是通过实时的日志的采集工具，经过Hadoop把Hadoop作为数据分析工具，呈现把结果放在甲骨文中做展现。

互联网公司之所以这么做，是因为互联网数据量大到在传统的数据库不能处理。现在传统的企业也面临同样的问题，将Hadoop作为数据仓库主要组成部分有四个驱动力：

效率：传统的数据仓库技术已经面临非常繁重的数据分析任务，处理的延迟从一天到了一周。

成本：传统的数据架构成本动辄几千万。Hadoop可以实现成本若干倍的降低。

数据来源多样：视频、音频等企业非结构化数据来源增多。MapReduce对于非结构化或半结构化数据的读取非常有效。

数据分析需求的演进： 数据分析不再只满足于统计。使用Hadoop的技术，能够对数据进行深度的挖掘和分析，实现对未来的预测。

Hadoop改变企业数据仓库架构的线路图 第一步：数据仓库的补充 2011、2012年的时候 Hadoop主要是作为数据仓库的补充在做数据的清洗。这一层Hadoop很擅长。Hadoop的优势是能够把计算任务对全要素进行统计分析，这是方式非常适合简单的场景，早年Hadoop的最佳用途是作为ETL的平台，第二步：逐渐进入核心

随着Hadoop生态系统逐渐完善，有更多的数字化工具支持Hadoop，Hadoop开始进入数据仓库的核心领域。有些企业开使用Hadoop来直接做数据可视化，在有些行业中已经开始用Hadoop逐渐取代传统的关系数据库来建立数据仓库。从整个的数据仓库的架构来看，有一半的架构已经开始被Hadoop覆盖了。

第三步：Hadoop使资源管理变为可能，最终将取代企业完整的整据仓库

在一两年之内有些企业完整的数据仓库架构都可能会被Hadoop取代掉。

过去企业数据仓库的时候任务很繁重，系统效率低下。造成这种状况的重要原因是，客户把过多的负载放在数据仓库上面，数据仓库本身又没有资源配合的方式。

Hadoop2.0推出了管理框架，使得资源管理变成了可能，使得数据仓库支撑多个部门的数据分析和访问更加高效。举例来说，每个部门的业务都是动态创建虚拟集群实现的，每个集群都有一定的资源配额，这样的配额用时不会超过这个配额，使得用户任何的负载不会影响其他的用户，这成为数据仓库里一个重要的实现，数据仓库完全平滑，24小时不间断运行的保障。过去上千人在访问Hadoop的时候，也是通过调度机制实现的，随着Hadoop2.0的出现和资源管理能力的提升，通过资源管理层可以方便的配置资源。

我们可以设定CPU的内存和存储资源，每个部门使用的时候有配额的最低保障。当另外一个部门的用户上线使用的时候，比如创建了一个集群，这时会把你的部分资源还给后面的第二个用户，原来第一个用户的资源被收缩了，更多的用户进来的时候，第一个用户的资源被进一步收缩，收缩到一个最低的指标。一方面充分保障了每个用户最低资源的配额，第二也保证系统整体运行的情况下可以充分有效利用整体的计算资源。

二、随着云计算和物联网的逐渐兴起，实时流数据的处理将成为关注重点

云计算和物联网使得数据呈现两个主要特点。首先，数据在没有人工干预的情况下24小时不间断的产生；第二数据并发量高，使得单一的统计已经不能满足用户要求，对数据模式的分析和深度挖掘的要求增强

现在的大数据处理不光需要做统计，而是需要做机器学习，快速地检测出异常的状态。

比如在交通行业部署的实时监控平台，这是一个发展得比较成熟的案例，在全国已经得到了广泛部署。其主要用途是把路面上装的摄像机的照片和分析出来的车牌等信息，实时的传送到中心的大集群中，然后把所有的车流信息实时汇总至省级集群部署，通过流处理形成实时的应用，比如说区间测速、实时路况、公安部实时布控的应用等。相关数据也会进入到数据库，对外提供车辆轨迹的查询，实时路况的检索，比如行车分析和交通管理的应用等。

过去在常见的部署架构中由数据集群做实时的处理时，包括应用和查询的功能，数据会经过蜂窝队列，分布量是非常高的，单节点的服务器可以支撑一秒钟十万条结果的插入，基本上是满负荷。

传统的流处理加上Hadoop，可以解耦前端应用和后端的分析应用。由于分布队列的吞吐量很高，可以在几百万个地方写入，可以基本满足上千万传感器同时传送峰值的压力，后端的是流处理的引擎做数据分析。

我们把数据流按时间切片，每个小切片一百毫秒左右。我们需要在数据经过这个流的时候在流上直接做异常检测，包括多种算法，最基本的是希望将这些算法直接移植到流上，实现流式的异常检测。这里面有一个挑战是，刚开始出现的异常可能并不准确，尽量要避免误报的情况，通常会用SQL来做聚合和预先的数据处理，而Spark可以实现小片的批处理流程，我们在小的批量上能够实现延迟是一秒钟内可以发出告警。

这种方式的好处是可以对实时数据和历史数据实现综合的分析，都同在一个数据库中，可以在上面用完整的统计分析的挖掘，包括可以做计算和预测，这些分析超出了以前统计的范畴，而且需要历史数据和实时数据进行统一的分析。这个领域今年可能会是比较热门的领域，预计这个模式在物联网实时处理上得到更加广泛的应用。

三、大数据技术能给我们的生活带来什么 我们把数据源分两大类：

1.人的行为产生的数据：包括网上购物、通过运营商通话、发微信都会留下数据，这些分析无外乎是给客户提供更好的服务，或者是帮助商家更准确的找到客户进行精准营销；

2.机器产生的数据：帮助发现一些客观规律，比如说交通的模式是怎样的，用电的消耗量和气侯和电网的关系是怎样的，也对数据进行分析和能够做实时报警和诊断优化生产线的流程提供依据。

数据分析和挖掘开始出现，目前还不是主流。大数据描绘的场景是能够进行预测，这逐渐开始成为事实。人流密度实时预警

比如通过对基站的数据基本上可以比较粗的定位人的大致位置。通过对数据进行密度的统计，可以非常迅速的找出区域内部密度的值，基础值是每个基站每英里多少个用户数，这是基站可以提供的数据，利用这个数据可以非常快的知道人群的密度。

也可以利用银联的数据，我们的合作伙伴用银联的数据把上海的商圈都找出来了，商圈是根据过去三个月银联的刷卡记录，根据消费额、消费地点以及消费商户的类别进行统计的，上海14个商圈是比较密集的，有些商圈我们也没去过，比较偏远的反而是商圈。上海的架构看基础是卫星城的架构，和北京不同，周围有很多密集的商圈。这个数据也可以做人群的预测，商圈是人群密集的地方，随着踩踏事件的出现，公安的客户也来找到我们，发现这个数据对他们很有用，因为我们可以统计节日间实时的刷卡记录，可以判断晚七点到九点消费集中的区域，这些区域是人 垃圾短信分类

利用流式的机器学习做垃圾短信的分类，在流上做实时的检测，速度是非常快的，可以流上实时的实现。运营商所有的短信经过流式系统可以迅速的判断出哪些消息是垃圾短信，来净化现在运营商的垃圾短信泛滥局面。消费者行为预测

机器学习类：协同过滤、相似度主要是比较商品间的相似程度进行推荐，一些新的应用也比较有趣，像是基于时序关系的预测。每次消费行为和时间是有关的，一个人经常跑到陆家嘴有一个明显的地方，带着小孩会去海洋公园玩一下，有时看东方明珠看一下，然后去正大广场吃个午饭，这是统计出一个模式，这是时序相关性，我们可以对客户推送一些比较精准的广告。总结

我们看到Hadoop主要的用途是数据仓库中，未来会逐渐的开始把更多的负载牵到上面来；第二物联网逐渐的兴起，针对一些挑战我们需要在流上做更强的分析和机器学习，这种新的架构也层出不穷；第三是全新的集群的应用。可以预见的是，随着云计算和物联网等技术的不断发展，利用大数据的分析能力实现对未来的洞察将逐渐成为现实。【编辑推荐】

大数据时代之hadoop：了解hadoop数据流（生命周期）惠普携手青岛打造大数据应用及产业示范基地

Apache Hadoop 2.6.0发布——异构存储，长时间运行的服务与滚动升级支持

Hadoop RPC通信Client客户端的流程分析

Spark 1.2：向MapReduce在Hadoop中的统治地位发起挑战