Spring JPA deleteInBatch 导致 StackOverflow
Spring JPA deleteInBatch causes StackOverflow
我对使用 deleteInBatch 从数据库中删除项目有疑问。
我有一个对象 A,它有一个对象 B 的列表,例如:
class A {
private List <B>;
}
该列表包含超过 7k 个元素。
所以现在我必须删除 A 及其所有元素。我尝试通过 deleteInBatch 但我得到
org.springframework.web.util.NestedServletException: Handler processing failed;
nested exception is java.lang.WhosebugError
使用简单的删除方法删除项目是可行的,但需要 5 分钟以上的时间。
我的删除代码是:
public void delete(Long id) {
A a = repository.findOne(id);
deleteElements(a);
repository.delete(a);
}
private void deleteElements(A a) {
repository.deleteInBatch(a.getListOfB);
}
是否有加快删除过程的好的解决方案或如何更改以便 deleteinbatch 不占用所有休眠堆栈 - 而不增加它?
完整的堆栈跟踪:
org.springframework.web.util.NestedServletException: Handler processing failed; nested exception is java.lang.WhosebugError
org.springframework.web.servlet.DispatcherServlet.triggerAfterCompletionWithError(DispatcherServlet.java:1259)
org.springframework.web.servlet.DispatcherServlet.doDispatch(DispatcherServlet.java:945)
org.springframework.web.servlet.DispatcherServlet.doService(DispatcherServlet.java:856)
org.springframework.web.servlet.FrameworkServlet.processRequest(FrameworkServlet.java:936)
org.springframework.web.servlet.FrameworkServlet.doGet(FrameworkServlet.java:827)
javax.servlet.http.HttpServlet.service(HttpServlet.java:620)
org.springframework.web.servlet.FrameworkServlet.service(FrameworkServlet.java:812)
javax.servlet.http.HttpServlet.service(HttpServlet.java:727)
org.apache.tomcat.websocket.server.WsFilter.doFilter(WsFilter.java:52)
net.bull.javamelody.MonitoringFilter.doFilter(MonitoringFilter.java:163)
net.bull.javamelody.MonitoringFilter.doFilter(MonitoringFilter.java:206)
net.bull.javamelody.MonitoringFilter.doFilter(MonitoringFilter.java:179)
org.springframework.security.web.FilterChainProxy$VirtualFilterChain.doFilter(FilterChainProxy.java:330)
org.springframework.security.web.access.intercept.FilterSecurityInterceptor.invoke(FilterSecurityInterceptor.java:118)
org.springframework.security.web.access.intercept.FilterSecurityInterceptor.doFilter(FilterSecurityInterceptor.java:84)
org.springframework.security.web.FilterChainProxy$VirtualFilterChain.doFilter(FilterChainProxy.java:342)
org.springframework.security.web.access.ExceptionTranslationFilter.doFilter(ExceptionTranslationFilter.java:113)
等等...
root cause
java.lang.WhosebugError
org.hibernate.hql.internal.ast.tree.SqlNode.<init>(SqlNode.java:34)
sun.reflect.GeneratedConstructorAccessor36.newInstance(Unknown Source)
sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)
java.lang.reflect.Constructor.newInstance(Constructor.java:526)
java.lang.Class.newInstance(Class.java:379)
org.hibernate.hql.internal.ast.SqlASTFactory.create(SqlASTFactory.java:256)
antlr.ASTFactory.create(ASTFactory.java:153)
antlr.ASTFactory.create(ASTFactory.java:186)
org.hibernate.hql.internal.antlr.HqlSqlBaseWalker.logicalExpr(HqlSqlBaseWalker.java:2018)
org.hibernate.hql.internal.antlr.HqlSqlBaseWalker.logicalExpr(HqlSqlBaseWalker.java:2026)
org.hibernate.hql.internal.antlr.HqlSqlBaseWalker.logicalExpr(HqlSqlBaseWalker.java:2026)
等等....
在您的情况下,删除查询将由 JpaRepository
翻译为如下所示。
delete from [table_name] where [criteria] = id or [criteria] = id (and so on...)
jvm 抛出堆栈溢出错误,因为 HqlSqlBaseWalker
正在尝试搜索所有 或 (或者基本上是 where
条件)语句
我想,在您的情况下,您可以尝试生成自己的删除查询然后执行它,或者您可以尝试将数据拆分为几个列表。
我遇到了同样的问题 (java.lang.WhosebugError) 并使用我自己的删除查询创建了一个方法,例如deleteByIdAndYear(...),避免它。
我最终将 deleteInBatch
与 an answer to another question 合并:
import com.google.common.collect.Lists;
...
Lists.partition(messages, 500)
.forEach(fragmentMessageDao::deleteInBatch);
对我来说,这提供了一个适当而优雅的解决方案,因为我已经需要数据进行另一次计算
在我的例子中,删除较小块中的实体很有帮助。
100 个项目的块工作得很好。
我对使用 deleteInBatch 从数据库中删除项目有疑问。 我有一个对象 A,它有一个对象 B 的列表,例如:
class A {
private List <B>;
}
该列表包含超过 7k 个元素。 所以现在我必须删除 A 及其所有元素。我尝试通过 deleteInBatch 但我得到
org.springframework.web.util.NestedServletException: Handler processing failed;
nested exception is java.lang.WhosebugError
使用简单的删除方法删除项目是可行的,但需要 5 分钟以上的时间。 我的删除代码是:
public void delete(Long id) {
A a = repository.findOne(id);
deleteElements(a);
repository.delete(a);
}
private void deleteElements(A a) {
repository.deleteInBatch(a.getListOfB);
}
是否有加快删除过程的好的解决方案或如何更改以便 deleteinbatch 不占用所有休眠堆栈 - 而不增加它?
完整的堆栈跟踪:
org.springframework.web.util.NestedServletException: Handler processing failed; nested exception is java.lang.WhosebugError
org.springframework.web.servlet.DispatcherServlet.triggerAfterCompletionWithError(DispatcherServlet.java:1259)
org.springframework.web.servlet.DispatcherServlet.doDispatch(DispatcherServlet.java:945)
org.springframework.web.servlet.DispatcherServlet.doService(DispatcherServlet.java:856)
org.springframework.web.servlet.FrameworkServlet.processRequest(FrameworkServlet.java:936)
org.springframework.web.servlet.FrameworkServlet.doGet(FrameworkServlet.java:827)
javax.servlet.http.HttpServlet.service(HttpServlet.java:620)
org.springframework.web.servlet.FrameworkServlet.service(FrameworkServlet.java:812)
javax.servlet.http.HttpServlet.service(HttpServlet.java:727)
org.apache.tomcat.websocket.server.WsFilter.doFilter(WsFilter.java:52)
net.bull.javamelody.MonitoringFilter.doFilter(MonitoringFilter.java:163)
net.bull.javamelody.MonitoringFilter.doFilter(MonitoringFilter.java:206)
net.bull.javamelody.MonitoringFilter.doFilter(MonitoringFilter.java:179)
org.springframework.security.web.FilterChainProxy$VirtualFilterChain.doFilter(FilterChainProxy.java:330)
org.springframework.security.web.access.intercept.FilterSecurityInterceptor.invoke(FilterSecurityInterceptor.java:118)
org.springframework.security.web.access.intercept.FilterSecurityInterceptor.doFilter(FilterSecurityInterceptor.java:84)
org.springframework.security.web.FilterChainProxy$VirtualFilterChain.doFilter(FilterChainProxy.java:342)
org.springframework.security.web.access.ExceptionTranslationFilter.doFilter(ExceptionTranslationFilter.java:113)
等等...
root cause
java.lang.WhosebugError
org.hibernate.hql.internal.ast.tree.SqlNode.<init>(SqlNode.java:34)
sun.reflect.GeneratedConstructorAccessor36.newInstance(Unknown Source)
sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)
java.lang.reflect.Constructor.newInstance(Constructor.java:526)
java.lang.Class.newInstance(Class.java:379)
org.hibernate.hql.internal.ast.SqlASTFactory.create(SqlASTFactory.java:256)
antlr.ASTFactory.create(ASTFactory.java:153)
antlr.ASTFactory.create(ASTFactory.java:186)
org.hibernate.hql.internal.antlr.HqlSqlBaseWalker.logicalExpr(HqlSqlBaseWalker.java:2018)
org.hibernate.hql.internal.antlr.HqlSqlBaseWalker.logicalExpr(HqlSqlBaseWalker.java:2026)
org.hibernate.hql.internal.antlr.HqlSqlBaseWalker.logicalExpr(HqlSqlBaseWalker.java:2026)
等等....
在您的情况下,删除查询将由 JpaRepository
翻译为如下所示。
delete from [table_name] where [criteria] = id or [criteria] = id (and so on...)
jvm 抛出堆栈溢出错误,因为 HqlSqlBaseWalker
正在尝试搜索所有 或 (或者基本上是 where
条件)语句
我想,在您的情况下,您可以尝试生成自己的删除查询然后执行它,或者您可以尝试将数据拆分为几个列表。
我遇到了同样的问题 (java.lang.WhosebugError) 并使用我自己的删除查询创建了一个方法,例如deleteByIdAndYear(...),避免它。
我最终将 deleteInBatch
与 an answer to another question 合并:
import com.google.common.collect.Lists;
...
Lists.partition(messages, 500)
.forEach(fragmentMessageDao::deleteInBatch);
对我来说,这提供了一个适当而优雅的解决方案,因为我已经需要数据进行另一次计算
在我的例子中,删除较小块中的实体很有帮助。 100 个项目的块工作得很好。