SpringOne2GX 2015 回放: Hadoop 工作流、分布式 YARN 应用和 Spring

新闻 | Pieter Humphrey | 2016年03月08日 | ...

录制于 SpringOne2GX 2015 演讲者:Thomas Risberg 大数据专场 幻灯片:http://www.slideshare.net/SpringCentral/hadoop-workflows-using-spring-technologies

Hadoop 生态系统越来越大也越来越复杂。使用该生态系统中的多个项目,您将不得不处理这些项目所提倡的哲学和使用模式的差异。"Spring for Apache Hadoop" 项目使用许多 Spring 项目(如 Data、Integration、Batch 和 Boot)来解决许多这些问题。它通过为使用 HDFS、MapReduce、Pig 和 Hive 提供统一的配置模型和易于使用的 API,简化了 Apache Hadoop 的开发。当您使用 "Spring for Apache Hadoop" 项目时,您可以利用您现有的 Java 和 Spring 技能来编写 Apache Hadoop 的应用程序和工作流。 在本次演示中,我们将了解它如何使使用 Map Reduce、Spark、Hive 和 Pig 作业开发工作流变得更容易,同时提供跨 Apache、Cloudera、Hortonworks 和 Pivotal 发行版的移植性。

我们还将展示 Spring Cloud 在构建可以使用集中式配置、领导者选举、分布式锁和状态在 Hadoop YARN 上运行的分布式应用程序时有多么有用。

获取 Spring 新闻资讯

与 Spring 新闻资讯保持联系

订阅

更进一步

VMware 提供培训和认证,以加速您的进步。

了解更多

获取支持

Tanzu Spring 在一个简单的订阅中提供 OpenJDK™、Spring 和 Apache Tomcat® 的支持和二进制文件。

了解更多

即将到来的活动

查看 Spring 社区中所有即将到来的活动。

查看全部