云计算与大数据处理
云计算基础知识
云计算是一种将可伸缩、弹性、共享的物理和虚拟资源池以按需自服务的方式供应和管理,并提供网络访问的模式
云计算的关键特征
1、关键特征
- 广泛的网络接入
- 可测量的服务
- 多租户
- 按需自服务
- 快速的弹性和可扩展性
- 资源池化
2、其它关键特征
- 虚拟化技术
- 可靠性高
- 性价比高
云计算的分类
- 公有云:一般是被一个云计算服务提供商所拥有,该组织将云计算服务销售给公众,公有云通常在远离客户建筑物的地方托管
- 私有云:云的基础设施是为一个客户单独使用而构建的,因而提供对数据、安全性和服务质量的最有效控制。私有云可部署在企业数据中心中,也可部署在一个主机托管场所,被一个单一的组织拥有或租用
- 社区云:云的基础设施被一些组织所共享,并为一个有共同关注点的社区服务。可以是该组织或某个第三方负责管理
- 混合云:云的基础设施由以上两种或两种以上的云(私有、社区或公有)组成
云计算的分类
- 基础设施即服务:IaSS
- 提供虚拟化的计算资源,如虚拟机、存储、网络和操作系统。其核心技术是虚拟化
- 平台即服务:PaSS
- 为开发、测试和管理软件应用程序提供按需开发的环境。其核心技术是分布式并行计算。PaaS实际上是指将软件研发的平台作为一种服务
- 软件即服务:SaSS
- 通过互联网提供按需软件付费应用程序,云计算提供商托管和管理软件应用程序,并允许用户连接到应用程序并通过互联网访问应用程序。客户可以自己定制、配置、组装来得到满足自身需求的软件系统
云关键技术
- 虚拟化技术
- 分布式数据存储
- 并行计算
- 运营支撑管理
大数据的特征
- 多样性(Variety)
- 速度(Velocity)
- 大量(Volume)
- 价值(Value):价值密度低
- 真实性(Veracity)
大数据处理流程
数据采集、数据分析和数据解释。