JMR

JMR(JingDong MapReduce)是一个托管集群平台,可以在京东云上运行大数据框架(如Apache Hadoop和Apache Spark)或运行这些框架相关的开源项目(如Apache Hive和Apache Pig),您可便捷地使用MapReduce,Hive,Spark,Presto等服务低成本开展大规模分布式数据计算服务和海量数据分析。

立即使用

产品优势

简单易用
基于自身的业务规模,来选择硬件机型(CPU、内存、磁盘),选软件组合和版本,选网络环境等,整个过程全部自动化部署。通常创建一个集群仅需十几分钟。
节约成本
可以按需创建集群,即离线作业运行结束就可以释放集群。可以动态的在需要的时候增加节点,也可以选择购买按量模式并长期运行。
深度整合
与京东云其他产品如云存储、云监控,大数据分析平台等深度整合,作为 JMR 产品中Hadoop/Spark 计算引擎的输入源或者输出目的地。
安全可靠
各集群通过VPC网络隔离,自动配置防火墙管理网络访问,支持网络ACL和安全组的自动配置;集群自带高可用方案并提供集群监控管理功能。

产品功能

集群管理

集群灵活创建

根据用户指定节点硬件配置、存储、软件,一键式自动创建集群,并自动完成防火墙设置、弹性IP绑定。

集群灵活扩容

随着业务量增大,可以随时对集群进行扩容。

集群灵活释放

如果是临时计算海量数据,可将随时释放相关联的集群。

全方位监控

集群主要指标

提供集群的可用性、性能监控,帮助用户发现问题、解决问题,同时满足用户对集群资源调整、释放等管理需求。

集群节点指标

监控集群中的每个节点的网络状态,硬盘状态等。

集群服务进程

根据您集群中的相关组件进行监控。 监控服务节点是否正常运转。

作业管理

配置作业

可选集群,可选作业跑在不同集群上。 可查看作业的详情,作业的历史执行日志。

部署作业

部署时的调度策略分为单次调度和周期调度。 可供客户灵活的选择作业自动执行的时间。

应用场景

离线分析

支持处理各类应用程序生成的各种日志,帮助用户将对非结构化数据或半结构化数据进行挖掘和分析。支持海量数据ETL,在大型数据集上进行数据抽取、转换、加载,同时支持用户自定义数据加工处理的作业,满足海量数据ETL的应用需求。

流计算

生产环境中的数据传入消息队列,流计算引擎实时不间断地处理消息队列中的数据,并产生新数据或是计算结果。流计算的产出可以存储至集群之中或是存储在外部云服务之上。

一站式大数据平台

JMR_BD-OS1.0版本,是一款平台级大数据产品。平台提供多源异构的数据采集模块、实时/离线计算框架,简洁易用的开发环境和平台接口,提供大数据管理、开发和计算的能力,可支撑企业级数据仓库、用户画像、知识图谱、深度学习、文本分析及更多企业级应用的构建。

客户案例

  • 钱大妈

    专营生鲜肉菜市场,以满足消费者对食材产品的新鲜健康需求为核心

    基于JMR搭建大数据平台,利用京东人工智能和大数据技术,提供智能补货和销量预测等。

  • 良品铺子

    一家专业品牌连锁运营公司,旨在成为休闲零食第一品牌。

    基于JMR搭建大数据平台,利用京东人工智能和大数据技术,提供智能补货和销量预测等。