云计算

大数据与云计算

云计算发展现状

谷歌 、亚马逊和微软等大公司是云计算的先行者。最近几年，以阿里云、云创大数据等为代表的中国云计算迅速崛起

云计算实现机制

体系结构

物理资源层包括计算机、存储器、网络设施、数据库和软件等

资源池层将大量相同类型的资源构成同构或接近同构的资源池

管理中间件层负责对云计算的资源进行管理，并对众多应用 任务进行调度，使资源能够高效地、安全地为应用提供服务

资源管理负责均衡地使用云资源节点，检测节点的故障并试图恢复或屏蔽它，并对资源的使用情况进行监视统计

任务管理负责执行用户或应用提交的任务，包括完成用户任务映像部署和管理、任务调度、任务执行、生命期管理等

用户管理包括提供用户交互接口、管理和识别用户身份、创建用户程序的执行环境、对用户的使用进行计费等

安全管理保障云计算设施的整体安全，包括身份认证、访问授权、综合防护和安全审计等

SOA构建层将云计算能力封装成标准的Web Services服务，并纳入SOA体系进行管理和使用，包括服务接口、服务注册、服务查找、服务访问和服务工作流等

以IaaS为例，云计算的实现机制

用户交互接口向应用以Web Services方式提供访问接口，获取用户需求

服务目录是用户可以访问的服务清单

系统管理模块负责管理和分配所有可用的资源，其核心是负载均衡

配置工具负责在分配的节点上准备任务运行环境

监视统计模块负责监视节点的运行状态，并完成用户使用节点情况的统计

云计算压倒性的成本优势

更低的硬件和网络成本

更低管理成本和电力成本

更高的资源利用率

大数据

定义：海量数据或巨量数据，其规模巨大到无法通过目前主流的计算机系统在合理时间内获取、存储、管理、处理并提炼以帮助使用者决策

4V+1C特征

数据量大（Volume）

多样（Variety）

快速（Velocity）

价值密度低（Value）

复杂度（Complexity）

云计算

定义

长定义：云计算是一种商业计算模型。它将计算任务分布在大量计算机构成的资源池上(这种资源池称为“云”)，使各种应用系统能够根据需要获取计算力、存储空间和信息服务。

短定义：云计算是通过网络按需提供可动态伸缩的廉价计算服务

云：是一些可以自我维护和管理的虚拟计算机资源，通常是一些大型服务器集群，包括计算服务器、存储服务器和宽带资源等。

特点

超大规模

虚拟化

高可靠性

通用性

高可伸缩性

按需服务

极其廉价

分类

将基础设施作为服务（IaaS）

将平台作为服务（PaaS）

将软件作为服务（SaaS）

云安全：通过大量客户端的参与来采集异常代码（病毒和木马等），并汇总到云计算平台上进行大规模统计分析，从而准确识别和过滤有害代码

自由主题