2

我正在尝试将 Spring JdbcTemplate 与 Spring 的 SimpleAsyncTaskExecutor 一起使用,以便与单线程环境相比,可以建立与数据库的并发连接,并且可以在更短的时间内将整个数据插入到相关表中。

我正在使用以下代码,但它不会加速我的应用程序。

我能找到的唯一线索是,bean“campaignProductDBWriter”只构造了一次,而当我在 tasklet 中将“throttle-limit”设置为 10 时,我期望创建 10 个单独的实例。

我究竟做错了什么?任何帮助或建议将不胜感激。

问候,

<bean id="dataSourceProduct"
  class="org.springframework.jdbc.datasource.DriverManagerDataSource"
  p:driverClassName="${jdbc.driverClassName}" p:url="${jdbc.url.product}"
  p:username="${jdbc.username.product}" p:password="${jdbc.password.product}" 
/>

<bean id="jdbcTemplateProduct" class="org.springframework.jdbc.core.JdbcTemplate">
  <property name="dataSource" ref="dataSourceProduct" />
</bean>

<bean id="simpleTaskExecutor" class="org.springframework.core.task.SimpleAsyncTaskExecutor" >
  <property name="concurrencyLimit" value="-1" />
</bean>

<batch:job id="sampleJob" restartable="true"  incrementer="dynamicJobParameters">             
  <batch:step id="mapMZList">
    <batch:tasklet allow-start-if-complete="true" task-executor="simpleTaskExecutor" throttle-limit="10">                     
      <batch:chunk reader="campaignProductItemReader" processor="campaignProductProcessor" writer="campaignProductDBWriter" commit-interval="5000"/>        
    </batch:tasklet>
  </batch:step>                 
</batch:job>

<bean id="campaignProductDBWriter" class="com.falcon.cc.job.step.CampaignProductWriter">
  <property name="jdbcTemplate" ref="jdbcTemplateProduct" />
</bean>


<bean id="campaignProductItemReader" class="com.falcon.cc.job.step.FlatFileSynchronizedItemReader" scope="step">    
  <property name="resource" value="file:#{jobParameters['input.TEST_FILE.path']}"/>

  <property name="lineMapper">
    <bean class="org.springframework.batch.item.file.mapping.DefaultLineMapper">        
      <property name="lineTokenizer">       
        <bean class="org.springframework.batch.item.file.transform.DelimitedLineTokenizer">
          <property name="delimiter" value=";"/>            
          <property name="names" value="approvalStatus,validFrom,validTo"/>
        </bean>
      </property>
      <property name="fieldSetMapper">
        <bean class="com.falcon.cc.mapper.CampaignProductFieldSetMapper" />
      </property>
    </bean>
  </property>
</bean>
4

2 回答 2

6

这不是您的 Spring 配置或您的使用方式的问题jdbcTemplate,它只是 JDBC API 的一个薄的、无状态的包装器。

最明显的可能性是您的瓶颈是您的数据库,而不是您的代码。完全有可能对数据库运行多个并发操作并不比一次执行一个更快。

这可能有几个原因,例如数据库锁定,或者只是缺乏原始 I/O 性能。

在考虑使用多线程来提高性能时,您必须确定瓶颈在哪里。如果您的代码不是瓶颈,那么使其成为多线程不会让事情变得更快。

于 2011-03-07T15:09:00.773 回答
1

当spring的上下文初始化时,它会创建上下文中声明的所有实例。 <bean id="campaignProductDBWriter" class="com.falcon.cc.job.step.CampaignProductWriter"> <property name="jdbcTemplate" ref="jdbcTemplateProduct" /> </bean>此代码将导致 spring 创建一个实例,CampaignProductWriter该实例将是一个单例(默认情况下,范围是单例)。为了有一个新的 bean 实例,它的范围必须是原型。

于 2016-10-26T16:05:38.747 回答