产品优势

优势 弹性MapReduce 自建 Hadoop
灵活
  • 您只需几分钟即可获得一个安全可靠的 Hadoop 集群,以运行 Hive、Spark、Presto 等主流开源计算框架。
  • 您还可以对一个已有的 EMR 集群进行快速的弹性伸缩,以在变动的业务部门数据分析需求与高昂 IT 硬件成本之间快速获得平衡点。
  • 通常需要花费长达数周甚至数月的时间来规划、建设未来半年到一年的 Hadoop 集群。
  • 运维部门难以适应业务的快速变化,无法做到灵活的集群伸缩。
可靠
  • Master 节点容灾设计,备节点秒级拉起,保障大数据服务可用性。
  • 完善的监控体系建设,您可以通过短信渠道秒级感知集群组件及任务的运行异常状况。
  • 支持将 Hive 元数据存放于 CDB,元数据可靠性达 99.9996%。
  • 支持分析存放于 COS 的高存储耐久性的 PB 级数据。
  • 自建 Hadoop 需要耗费大量人力、资金、时间成本去建设完善的支撑体系,以保障服务的延续性和数据的可靠性。
安全
  • 您可以通过便捷的 VPC 网络安全隔离手段规划您的托管 Hadoop 集群网络策略,支持网络 ACL 和安全组,您可从子网和主机维度筛选流量,全方位满足您的网络安全需求。
  • 腾讯云品质的安全加固服务为 EMR 集群提供一体化的安全服务,涵盖网络防护、入侵检测、漏洞防护等。
  • 需花费大量精力和时间构建大数据安全体系,很可能因为极小的安全疏忽,给企业带来无法估量的商业风险。
易用
  • 您可以响应业务需求创建不同版本的集群分析 COS 上的同一份数据。
  • 您可以借助开箱即用的 Hue、Oozie 等社区组件随心分析位于数据节点或 COS 上的 PB 级数据,无需担心产生任何知识迁移成本。
  • 前期需要解决众多的 Hadoop 组件冲突问题,后期又需要费时费力地构建涵盖安全、监控、告警在内的基础设施。
  • 通过邮件、论坛等渠道获取技术支持,通常耗时数周,甚至数月。
成本节约
  • 通过 EMR 服务,您可以按业务曲线随心伸缩托管 Hadoop 集群,极致缩减高昂的硬件成本。
  • 丰富的运维工具支持,助您大幅提升运维工作效率,让工程师更专注于业务本身的商业价值,摆脱重复搭建监控、安全、运维工具等基础设施。
  • 按峰值规划 Hadoop 集群规模的模式,导致企业硬件成本高昂。
  • 复杂的大数据运维管控环境让运维工程师疲于应对。
 

产品功能

弹性伸缩
分钟级集群创建

通过控制台数分钟就可创建一个安全、稳定的云端托管Hadoop集群。

分钟级集群扩缩容

仅需数分钟即可对现有 EMR 集群进行平滑扩缩容,以适应互联网业务的快速变化。

API支持

支持通过API方式便捷的在程序中创建、扩缩容、销毁 EMR 集群

存储计算分离
集群内存储计算分离

集群内支持按照存储节点、计算节点的模式来规划云端托管 Hadoop 集群,以支持客户对计算节点的随意伸缩来降低硬件成本。

基于COS的存储计算分离

支持把待分析海量数据存放于COS,在通过COS规模化效应降低存储成本的同时,您还可以创建不同 EMR 版本分析同一份数据,这将为您带来极度的架构灵活性。

运维支撑体系
监控与多渠道告警

提供完善的监控运维体系对包含Spark、Hive、Presto等在内的组件异常和任务异常的秒级感知,以保障大数据集群的稳健运行。

技术服务支持

在提供完善技术文档之外,还支持包含邮件、QQ、微信等渠道在内的技术服务体系,为客户提供完备的技术支持。

 

应用场景

离线数据分析

把游戏、WEB 应用、手机 APP 等业务服务器上的海量日志同步到 EMR 的数据节点或 COS 后,您可以借助于 Hue 等工具使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。

您还可以使用 Sqoop 等工具加载分散于各 CDB 或其他存储引擎的数据,并把分析后的数据同步到 CDB,为RayData 这样的数据可视化产品提供数据支撑。

流式数据处理

在程序/工具中通过 API、SDK 把位于业务服务器上实时产生的数据 Push 到 CMQ 消息中间件之后,您可以在 EMR 产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 CDB 等存储引擎,以便于您能通过 RayData 等数据可视化产品对业务状态进行实时可视化检测。

EMR分析COS数据

您可以通过 EMR 产品快速分析存储于 COS 上的海量数据,以实现彻底的存储计算分离。
通过这样的设计,您可以充分利用 COS 提供的丰富数据同步工具,同时还可以让多个不同版本 Hadoop 集群分析同一份数据,以满足数据一致性及历史原因导致的多版本 Hadoop 集群共存的问题。

相关产品: