领先一步
VMware 提供培训和认证,以加速您的进步。
了解更多现在 Spring for Apache Hadoop 2.0 版本已正式发布,我想借此机会介绍我们新的 Spring IO 入门 指南,用于构建 Hadoop YARN 应用程序。
我们提供了一些通用指南,介绍如何使用 Gradle 或 Maven 使用 Spring YARN。我们的指南设计为适用于这两种构建系统。
这两个指南演示了一个熟悉的“Hello World”应用程序类型,它具有非常简单的代码库。这些应用程序的行为是相同的,项目结构有所不同。虽然我们的大多数指南都基于多项目结构,但使用 Spring YARN 构建应用程序当然不限于此。第二个指南演示了如何使用单个项目创建应用程序。
Spring YARN 为 YARN 应用程序提供了首屈一指的测试支持。本指南的重点是展示如何使用 Hadoop 的迷你集群作为单元测试中的集群替换来测试简单的应用程序。您不需要拥有真正运行的 Hadoop 实例。
最后两个指南演示了如何在 Hadoop YARN 上对 Spring Batch 步骤进行分区。第二个指南展示了如何重新启动失败的批处理作业,以及如何在 Hadoop YARN 上仅执行剩余的步骤。