电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術文章
文章詳情頁

Spring Batch 入門示例

瀏覽:11日期:2023-07-07 18:01:29
目錄1.Spring Batch框架工作原理2.示例概述3. Maven配置4. Spring Boot 配置5. 創建實體模型6. 配置 Spring Batch Job7. 處理數據8.測試Spring Batch 示例

我將向您展示如何使用Spring Boot創建一個的Spring Batch的Hello World示例。

(循序漸進)

因此,如果您是Spring Batch的初學者,您一定會喜歡本指南。

準備好了嗎?

如果您想了解更多關于Spring Batch的信息,請訪問

Spring Batch教程頁面。

1.Spring Batch框架工作原理

在深入研究代碼之前,讓我們先看看Spring Batch框架。它包含以下主要構建塊:

Spring Batch 入門示例

一個Batch(批處理)過程由一個Job(作業)組成。這個實體封裝了整個批處理過程。

一個Job(作業)可以由一個或多個Step(步驟)組成。在大多數情況下,一個步驟將讀取數據(通過ItemReader),處理數據(使用ItemProcessor),然后寫入數據(通過ItemWriter)。

JobLauncher處理啟動一個Job(作業)。

最后,JobRepository存儲關于配置和執行的Job(作業)的元數據。

為了演示Spring Batch是如何工作的,讓我們構建一個簡單的Hello World批處理作業。

在本例中,我們從person.csv文件中讀取一個人的姓和名。從這些數據生成一個問候語。然后將此問候語寫入greeting .txt文件。

2.示例概述

我們會使用以下工具/框架:

Spring Batch 4.1 Spring Boot 2.1 Maven 3.6

我們的項目目錄結構如下:

Spring Batch 入門示例

3. Maven配置

我們使用Maven構建并運行示例。如果還沒有,下載并安裝Apache Maven。

讓我們使用Spring Initializr來生成Maven項目。確保選擇Batch作為依賴項。

Spring Batch 入門示例

單擊Generate Project生成并下載Spring Boot項目模板。在項目的根目錄中,您將發現一個pom.xml文件,它是Maven項目的XML配置文件。

為了避免必須管理不同Spring依賴項的版本兼容性,我們將從spring-boot-starter-parent 父POM繼承默認配置。

生成的項目包含Spring Boo Starters管理著不同的Spring依賴項。

spring-boot-starter-batch導入Spring Boot和Spring Batch依賴項。

spring-boot-starter-test 包含用于測試Spring引導應用程序的依賴項。它導入了包括JUnit、Hamcrest和Mockito在內的庫。

這個也有依賴性spring-batch-test。這個庫包含一些幫助類,它們將幫助測試批處理作業。

在plugins部分,您將找到Spring Boot Maven插件:spring-boot-maven- plugin。它幫助我們構建一個單一的、可運行的uber-jar。這是執行和發布代碼的一種方便方法。此外,插件允許您通過Maven命令啟動示例。

<?xml version='1.0' encoding='UTF-8'?><project xmlns='http://maven.apache.org/POM/4.0.0' xmlns:xsi='http://www.w3.org/2001/XMLSchema-instance' xsi:schemaLocation='http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd'> <modelVersion>4.0.0</modelVersion> <groupId>com.codenotfound</groupId> <artifactId>spring-batch-hello-world</artifactId> <version>0.0.1-SNAPSHOT</version> <packaging>jar</packaging> <name>spring-batch-hello-world</name> <description>Spring Batch Hello World Example</description> <url>https://codenotfound.com/spring-batch-example.html</url> <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artifactId> <version>2.1.5.RELEASE</version> <relativePath /> <!-- lookup parent from repository --> </parent> <properties> <java.version>11</java.version> </properties> <dependencies> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-batch</artifactId> </dependency> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-test</artifactId> <scope>test</scope> </dependency> <dependency> <groupId>org.springframework.batch</groupId> <artifactId>spring-batch-test</artifactId> <scope>test</scope> </dependency> </dependencies> <build> <plugins> <plugin><groupId>org.springframework.boot</groupId><artifactId>spring-boot-maven-plugin</artifactId> </plugin> </plugins> </build></project>4. Spring Boot 配置

我們使用Spring Boot,目的是讓一個Spring Batch應用程序可以“直接運行”。首先創建一個SpringBatchApplication類。它包含main()方法,該方法使用Spring Boot的SpringApplication.run()啟動應用程序。

注意@SpringBootApplication是一個方便的注解,它添加了:@Configuration、@EnableAutoConfiguration和@ComponentScan。

有關Spring Boot的更多信息,請查看Spring Boot入門指南。

默認情況下,Spring Batch使用數據庫存儲已配置的批處理作業上的元數據。

在本例中,我們不直接使用數據庫,而是使用基于內存映射的Map,運行Spring Batch。

spring-boot-starter-batch starter依賴于spring-boot-starter-jdbc,并將嘗試實例化數據源。添加 exclude = {DataSourceAutoConfiguration.class}注解中添加@SpringBootApplication。這可以防止Spring Boot為數據庫連接自動配置DataSource。

package com.codenotfound;import org.springframework.boot.SpringApplication;import org.springframework.boot.autoconfigure.SpringBootApplication;import org.springframework.boot.autoconfigure.jdbc.DataSourceAutoConfiguration;@SpringBootApplication(exclude = {DataSourceAutoConfiguration.class})public class SpringBatchApplication { public static void main(String[] args) { SpringApplication.run(SpringBatchApplication.class, args); }}5. 創建實體模型

在處理數據之前,通常希望將其映射到實體對象。

在我的示例中,輸入數據存儲在src/test/resources/csv/persons.csv文件中。

文件中的每一行都包含一個逗號分隔的姓和名。

John, DoeJane, Doe

我們將把這個數據映射到Person對象。這是一個包含姓和名的簡單POJO。

package com.codenotfound.model;public class Person { private String firstName; private String lastName; public Person() { // default constructor } public String getFirstName() { return firstName; } public void setFirstName(String firstName) { this.firstName = firstName; } public String getLastName() { return lastName; } public void setLastName(String lastName) { this.lastName = lastName; } @Override public String toString() { return firstName + ' ' + lastName; }}6. 配置 Spring Batch Job

我們首先創建一個BatchConfig類,它將配置Spring Batch。類頂部的@Configuration注解表明Spring可以使用該類作為bean定義的源。

我們添加了@EnableBatchProcessing注解,它支持所有所需Spring Batch特性。它還提供了設置批處理作業的基本配置。

通過添加這個注解會需要很多操作。下面是@EnableBatchProcessing創建的概述:

JobRepository (bean名稱 'jobRepository') JobLauncher (bean名稱 'jobLauncher') JobRegistry (bean名稱 'jobRegistry') JobExplorer (bean名稱 'jobExplorer') PlatformTransactionManager (bean名稱 'transactionManager') JobBuilderFactory (bean名稱'jobBuilders'),它可以方便地防止您必須將作業存儲庫注入到每個Job(作業)中 StepBuilderFactory (bean名稱 'stepBuilders'),以方便您避免將作業存儲庫和事務管理器注入到每個Step(步驟)中

為了使Spring Batch使用基于Map的JobRepository,我們需要擴展DefaultBatchConfigurer。重寫setDataSource()方法以不設置DataSource。這將導致自動配置使用基于Map的JobRepository。

package com.codenotfound.batch;import javax.sql.DataSource;import org.springframework.batch.core.configuration.annotation.DefaultBatchConfigurer;import org.springframework.batch.core.configuration.annotation.EnableBatchProcessing;import org.springframework.context.annotation.Configuration;@Configuration@EnableBatchProcessingpublic class BatchConfig extends DefaultBatchConfigurer { @Override public void setDataSource(DataSource dataSource) { // initialize will use a Map based JobRepository (instead of database) }}

現在讓我們繼續配置Hello World Spring Batch 作業。

創建一個HelloWorldJobConfig配置類,并用添加@Configuration注解。

在HelloWorldJobConfig Bean中,我們使用JobBuilderFactory來創建作業。我們傳遞Job(作業)的名稱和需要運行的Step(步驟)。

注意在helloWorlJob()Bean中,Spring將自動注入 jobBuilders 和 stepBuilders Beans。

在HelloWorldStepBean中定義了我們的步驟執行的不同項。我們使用StepBuilderFactory創建步驟。

首先,我們傳入步驟的名稱。使用chunk(),我們指定每個事務中處理的項的數量。Chunk還指定步驟的輸入(Person)和輸出(String)類型。然后,我們將ItemReader (reader)、ItemProcessor (processor)和ItemWriter (writer)添加到步驟中。

我們使用FlatFileItemReader讀取person CSV文件。這個類提供了讀取和解析CSV文件的基本功能。

有一個FlatFileItemReaderBuilder實現,它允許我們創建一個FlatFileItemReader。我們首先指定讀取文件中每一行的結果是Person對象。然后,我們將使用name()方法為FlatFileItemReader添加一個名稱,并指定需要讀取的資源(在本例中是persons.csv文件)。

為了讓FlatFileItemReader處理我們的文件,我們需要指定一些額外的信息。首先,我們定義文件中的數據是帶分隔符的(默認為逗號作為分隔符)。

我們還指定了如何將一行中的每個字段映射到Person對象。這是使用names()來完成的,通過將名稱與對象上的setter匹配,可以使Spring Batch映射字段。在本文的例子中,一行的第一個字段將使用firstName setter進行映射。為了實現這一點,我們還需要指定targetType,即Person對象。

注意:

names(new String[] {'firstName', 'lastName'})

PersonItemProcessor處理數據。它將一個Person轉換成一個問候String。我們將在下面的一個單獨的類中定義它。

一旦數據被處理,我們將把它寫入一個文本文件。我們使用FlatFileItemWriter來完成這項任務。

我們使用FlatFileItemWriterBuilder實現來創建一個FlatFileItemWriter。我們為writer添加一個名稱,并指定需要將數據寫入其中的資源(在本例中是greeting.txt文件)。

FlatFileItemWriter需要知道如何將生成的輸出轉換成可以寫入文件的單個字符串。在本例中,我們的輸出已經是一個字符串,我們可以使用PassThroughLineAggregator。這是最基本的實現,它假定對象已經是一個字符串。

package com.codenotfound.batch;import org.springframework.batch.core.Job;import org.springframework.batch.core.Step;import org.springframework.batch.core.configuration.annotation.JobBuilderFactory;import org.springframework.batch.core.configuration.annotation.StepBuilderFactory;import org.springframework.batch.item.file.FlatFileItemReader;import org.springframework.batch.item.file.FlatFileItemWriter;import org.springframework.batch.item.file.builder.FlatFileItemReaderBuilder;import org.springframework.batch.item.file.builder.FlatFileItemWriterBuilder;import org.springframework.batch.item.file.transform.PassThroughLineAggregator;import org.springframework.context.annotation.Bean;import org.springframework.context.annotation.Configuration;import org.springframework.core.io.ClassPathResource;import org.springframework.core.io.FileSystemResource;import com.codenotfound.model.Person;@Configurationpublic class HelloWorldJobConfig { @Bean public Job helloWorlJob(JobBuilderFactory jobBuilders, StepBuilderFactory stepBuilders) { return jobBuilders.get('helloWorldJob').start(helloWorldStep(stepBuilders)).build(); } @Bean public Step helloWorldStep(StepBuilderFactory stepBuilders) { return stepBuilders.get('helloWorldStep').<Person, String>chunk(10).reader(reader()).processor(processor()).writer(writer()).build(); } @Bean public FlatFileItemReader<Person> reader() { return new FlatFileItemReaderBuilder<Person>().name('personItemReader').resource(new ClassPathResource('csv/persons.csv')).delimited().names(new String[] {'firstName', 'lastName'}).targetType(Person.class).build(); } @Bean public PersonItemProcessor processor() { return new PersonItemProcessor(); } @Bean public FlatFileItemWriter<String> writer() { return new FlatFileItemWriterBuilder<String>().name('greetingItemWriter').resource(new FileSystemResource( 'target/test-outputs/greetings.txt')).lineAggregator(new PassThroughLineAggregator<>()).build(); }}7. 處理數據

在大多數情況下,您將希望在批處理作業期間應用一些數據處理。可以使用ItemProcessor來操作。

在我們的示例中,我們將Person對象轉換為一個簡單的問候語String

為此,我們創建一個實現ItemProcessor接口的PersonItemProcessor。我們實現了process()方法,它將人名和姓氏添加到字符串中。

調試的過程中,我們記錄日志結果。

package com.codenotfound.batch;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import org.springframework.batch.item.ItemProcessor;import com.codenotfound.model.Person;public class PersonItemProcessor implements ItemProcessor<Person, String> { private static final Logger LOGGER = LoggerFactory.getLogger(PersonItemProcessor.class); @Override public String process(Person person) throws Exception { String greeting = 'Hello ' + person.getFirstName() + ' '+ person.getLastName() + '!'; LOGGER.info('converting ’{}’ into ’{}’', person, greeting); return greeting; }}8.測試Spring Batch 示例

為了測試本的例子,我們創建了一個基本的單元測試用例。它將運行批處理作業并檢查是否成功完成。

我們使用@RunWith和@SpringBootTest測試注解告訴JUnit使用Spring的測試支持運行,并使用SpringBoot的支持引導。

Spring Batch附帶一個JobLauncherTestUtils實用程序類,用于測試批處理作業。

我們首先創建一個內部BatchTestConfig類,將helloWorld作業添加到JobLauncherTestUtils bean中。然后使用此bean的launchJob()方法運行批處理作業。

如果執行的作業沒有任何錯誤,則ExitCode的值為COMPLETED。

package com.codenotfound;import static org.assertj.core.api.Assertions.assertThat;import org.junit.Test;import org.junit.runner.RunWith;import org.springframework.batch.core.Job;import org.springframework.batch.core.JobExecution;import org.springframework.batch.core.launch.NoSuchJobException;import org.springframework.batch.test.JobLauncherTestUtils;import org.springframework.beans.factory.annotation.Autowired;import org.springframework.boot.test.context.SpringBootTest;import org.springframework.context.annotation.Bean;import org.springframework.context.annotation.Configuration;import org.springframework.context.annotation.Import;import org.springframework.test.context.junit4.SpringRunner;import com.codenotfound.batch.job.BatchConfig;import com.codenotfound.batch.job.HelloWorldJobConfig;@RunWith(SpringRunner.class)@SpringBootTest( classes = {SpringBatchApplicationTests.BatchTestConfig.class})public class SpringBatchApplicationTests { @Autowired private JobLauncherTestUtils jobLauncherTestUtils; @Test public void testHelloWorldJob() throws Exception { JobExecution jobExecution = jobLauncherTestUtils.launchJob(); assertThat(jobExecution.getExitStatus().getExitCode()).isEqualTo('COMPLETED'); } @Configuration @Import({BatchConfig.class, HelloWorldJobConfig.class}) static class BatchTestConfig { @Autowired private Job helloWorlJob; @Bean JobLauncherTestUtils jobLauncherTestUtils()throws NoSuchJobException { JobLauncherTestUtils jobLauncherTestUtils = new JobLauncherTestUtils(); jobLauncherTestUtils.setJob(helloWorlJob); return jobLauncherTestUtils; } }}

要觸發上述測試用例,請在項目根文件夾中打開命令提示符,并執行以下Maven命令:

mvn test

結果是構建成功,并在此期間執行批處理作業。

. ____ _ __ _ _/ / ___’_ __ _ _(_)_ __ __ _ ( ( )___ | ’_ | ’_| | ’_ / _` | / ___)| |_)| | | | | || (_| | ) ) ) ) ’ |____| .__|_| |_|_| |___, | / / / /=========|_|==============|___/=/_/_/_/:: Spring Boot ::(v2.1.5.RELEASE)2019-05-30 19:11:12.784 INFO 14588 --- [ main] c.c.SpringBatchApplicationTests : Starting SpringBatchApplicationTests on DESKTOP-2RB3C1U with PID 14588 (started by Codenotfound in C:UsersCodenotfoundreposspring-batchspring-batch-hello-world)2019-05-30 19:11:12.785 INFO 14588 --- [ main] c.c.SpringBatchApplicationTests : No active profile set, falling back to default profiles: default2019-05-30 19:11:13.305 WARN 14588 --- [ main] o.s.b.c.c.a.DefaultBatchConfigurer : No datasource was provided...using a Map based JobRepository2019-05-30 19:11:13.306 WARN 14588 --- [ main] o.s.b.c.c.a.DefaultBatchConfigurer : No transaction manager was provided, using a ResourcelessTransactionManager2019-05-30 19:11:13.328 INFO 14588 --- [ main] o.s.b.c.l.support.SimpleJobLauncher : No TaskExecutor has been set, defaulting to synchronous executor.2019-05-30 19:11:13.350 INFO 14588 --- [ main] c.c.SpringBatchApplicationTests : Started SpringBatchApplicationTests in 0.894 seconds (JVM running for 1.777)2019-05-30 19:11:13.732 INFO 14588 --- [ main] o.s.b.c.l.support.SimpleJobLauncher : Job: [SimpleJob: [name=helloWorldJob]] launched with the following parameters: [{random=459672}]2019-05-30 19:11:13.759 INFO 14588 --- [ main] o.s.batch.core.job.SimpleStepHandler : Executing step: [helloWorldStep]2019-05-30 19:11:13.812 INFO 14588 --- [ main] c.c.batch.PersonItemProcessor : converting ’John Doe’ into ’Hello John Doe!’2019-05-30 19:11:13.822 INFO 14588 --- [ main] c.c.batch.PersonItemProcessor : converting ’Jane Doe’ into ’Hello Jane Doe!’2019-05-30 19:11:13.842 INFO 14588 --- [ main] o.s.b.c.l.support.SimpleJobLauncher : Job: [SimpleJob: [name=helloWorldJob]] completed with the following parameters: [{random=459672}] and the following status: [COMPLETED][INFO] Tests run: 1, Failures: 0, Errors: 0, Skipped: 0, Time elapsed: 1.953 s - in com.codenotfound.SpringBatchApplicationTests[INFO][INFO] Results:[INFO][INFO] Tests run: 1, Failures: 0, Errors: 0, Skipped: 0[INFO][INFO] ------------------------------------------------------------------------[INFO] BUILD SUCCESS[INFO] ------------------------------------------------------------------------[INFO] Total time: 6.852 s[INFO] Finished at: 2019-05-30T19:11:14+02:00[INFO] ------------------------------------------------------------------------

您可以在target/test-output /greeting .txt文件中找到結果:

Hello John Doe!Hello Jane Doe!

如果您想運行上面的代碼示例,您可以在這里獲得完整的源代碼。

在本入門教程中,您學習了如何使用Spring Boot和Maven創建一個簡單的Spring Batch示例。

到此這篇關于Spring Batch 入門示例的文章就介紹到這了,更多相關Spring Batch 入門內容請搜索好吧啦網以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持好吧啦網!

標簽: Spring
相關文章:
主站蜘蛛池模板: 低合金板|安阳低合金板|河南低合金板|高强度板|桥梁板_安阳润兴 北京租车牌|京牌指标租赁|小客车指标出租 | 鼓风干燥箱_真空烘箱_高温干燥箱_恒温培养箱-上海笃特科学仪器 | 蒜肠网-动漫,二次元,COSPLAY,漫展以及收藏型模型,手办,玩具的新媒体.(原变形金刚变迷TF圈) | 盘装氧量分析仪-防爆壁挂氧化锆分析仪-安徽吉帆仪表有限公司 | 量子管通环-自清洗过滤器-全自动反冲洗过滤器-北京罗伦过滤技术集团有限公司 | 同步带轮_同步带_同步轮_iHF合发齿轮厂家-深圳市合发齿轮机械有限公司 | 真空搅拌机-行星搅拌机-双行星动力混合机-广州市番禺区源创化工设备厂 | 退火炉,燃气退火炉,燃气热处理炉生产厂家-丹阳市丰泰工业炉有限公司 | 岛津二手液相色谱仪,岛津10A液相,安捷伦二手液相,安捷伦1100液相-杭州森尼欧科学仪器有限公司 | 滤芯,过滤器,滤油机,贺德克滤芯,精密滤芯_新乡市宇清流体净化技术有限公司 | 盐城网络公司_盐城网站优化_盐城网站建设_盐城市启晨网络科技有限公司 | DWS物流设备_扫码称重量方一体机_快递包裹分拣机_广东高臻智能装备有限公司 | 济南轻型钢结构/济南铁艺护栏/济南铁艺大门-济南燕翔铁艺制品有限公司 | 耐火砖厂家,异形耐火砖-山东瑞耐耐火材料厂| 制氮设备_PSA制氮机_激光切割制氮机_氮气机生产厂家-苏州西斯气体设备有限公司 | 减速机_上海宜嘉减速机| 不锈钢监控杆_监控立杆厂家-廊坊耀星光电科技有限公司 | 经济师考试_2025中级经济师报名时间_报名入口_考试时间_华课网校经济师培训网站 | 上海噪音治理公司-专业隔音降噪公司-中广通环保 | 江苏远邦专注皮带秤,高精度皮带秤,电子皮带秤研发生产 | 可程式恒温恒湿试验箱|恒温恒湿箱|恒温恒湿试验箱|恒温恒湿老化试验箱|高低温试验箱价格报价-广东德瑞检测设备有限公司 | 爱德华真空泵油/罗茨泵维修,爱发科-比其尔产品供应东莞/杭州/上海等全国各地 | 四川实木门_成都实木门 - 蓬溪聚成门业有限公司 | 屏蔽服(500kv-超高压-特高压-电磁)-徐吉电气 | 南京交通事故律师-专打交通事故的南京律师| 武汉森源蓝天环境科技工程有限公司-为环境污染治理提供协同解决方案 | 挤出熔体泵_高温熔体泵_熔体出料泵_郑州海科熔体泵有限公司 | 高效复合碳源-多核碳源生产厂家-污水处理反硝化菌种一长隆科技库巴鲁 | 广州小程序开发_APP开发公司_分销商城系统定制_小跑科技 | 可程式恒温恒湿试验箱|恒温恒湿箱|恒温恒湿试验箱|恒温恒湿老化试验箱|高低温试验箱价格报价-广东德瑞检测设备有限公司 | 行星齿轮减速机,减速机厂家,山东减速机-淄博兴江机械制造 | 美名宝起名网-在线宝宝、公司、起名平台| 脉冲除尘器,除尘器厂家-淄博机械| PCB接线端子_栅板式端子_线路板连接器_端子排生产厂家-置恒电气 喷码机,激光喷码打码机,鸡蛋打码机,手持打码机,自动喷码机,一物一码防伪溯源-恒欣瑞达有限公司 假肢-假肢价格-假肢厂家-河南假肢-郑州市力康假肢矫形器有限公司 | 登车桥动力单元-非标液压泵站-非标液压系统-深圳市三好科技有限公司 | MTK核心板|MTK开发板|MTK模块|4G核心板|4G模块|5G核心板|5G模块|安卓核心板|安卓模块|高通核心板-深圳市新移科技有限公司 | 河南卓美创业科技有限公司-河南卓美防雷公司-防雷接地-防雷工程-重庆避雷针-避雷器-防雷检测-避雷带-避雷针-避雷塔、机房防雷、古建筑防雷等-山西防雷公司 | 深圳展厅设计_企业展馆设计_展厅设计公司_数字展厅设计_深圳百艺堂 | 专业深孔加工_东莞深孔钻加工_东莞深孔钻_东莞深孔加工_模具深孔钻加工厂-东莞市超耀实业有限公司 | 安驭邦官网-双向万能直角铣头,加工中心侧铣头,角度头[厂家直销] 闸阀_截止阀_止回阀「生产厂家」-上海卡比阀门有限公司 | 杭州公司变更法人-代理记账收费价格-公司注销代办_杭州福道财务管理咨询有限公司 |