OpenJPA合并/持久化非常慢

小编典典

OpenJPA合并/持久化非常慢

java

我在带有MySQL 5.0 DB的WebSphere Application Server 8上使用OpenJPA 2.2.0。

我有一个要合并到数据库中的对象列表。

就像是：

for (Object ob : list) {
            Long start = Calendar.getInstance().getTimeInMillis();
            em = factory.createEntityManager();
            em.getTransaction().begin();

            em.merge(ob);

            em.getTransaction().commit();
            em.close();
            Long end = Calendar.getInstance().getTimeInMillis();
            Long diff = end - start;
            LOGGER.info("Time: " + diff);
        }

当我运行此循环时，我需要大约300-600毫秒来合并一个对象。当我删除“ em.merge（ob）;”行时那么我需要“ 0”毫秒来遍历1个列表对象。

所以我的问题是：我该怎么做才能缩短合并一个对象的时间？

谢谢！

阅读 289

2020-11-19

共1个答案

小编典典

您可以尝试在迭代之前启动事务，然后在单个事务中提交。因此，基本上，您正在创建一个将在提交时合并/持久化的批处理。

此外，您可以限制一次要处理的批次中的对象数量，也可以将更改显式刷新到数据库中。

在这里，您要启动一个事务并在每次迭代中提交它，并且每次都创建/关闭实体管理器，这将影响大量数据的性能。

这将类似于下面的代码。

em = factory.createEntityManager();
em.getTransaction().begin();
int i = 0;

   for (Object ob : list) {
       Long start = Calendar.getInstance().getTimeInMillis();

       em.merge(ob);

       Long end = Calendar.getInstance().getTimeInMillis();
       Long diff = end - start;
       LOGGER.info("Time: " + diff);

       /*BATCH_SIZE is the number of entities 
            that will be persisted/merged at once */

       if(i%BATCH_SIZE == 0){    
           em.flush();
           em.clear(); 
       }

       i++;
   }

em.getTransaction().commit();
em.close();

在这里，如果任何对象无法持久/合并，您还可以回滚整个事务。

2020-11-19