批量从数据库导出数据导致 Java Out of Memory 异常 ?

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

V2EX 提问指南

这是一个创建于 1907 天前的主题，其中的信息可能已经有所发展或是发生改变。

这样为什么会导致 OOM, 难道是没有及时 GC 导致的吗

第 1 条附言 · 2019-09-04 16:51:46 +08:00

解决了, 是因为分页查询的那个方法, 没有把数据从托管状态变为游离状态, 所以没有释放掉内存 (用的 spring data jpa)

8 条回复 • 2019-09-04 19:42:12 +08:00

ffeii

2019-09-04 10:31:36 +08:00

这是一次读 5000 条数据到内存了

cccy0

2019-09-04 10:38:00 +08:00

@ffeii #1 一次 1 万条都没问题, 但是内存占用好像是一直增加的, 大概到 5 万条左右就 OOM 了

patx

2019-09-04 10:47:00 +08:00 via Android

用游标的方式读

nekoneko

2019-09-04 11:05:15 +08:00

堆内存调大点 Xms 初始内存 Xmx 最大内存

nekoneko

2019-09-04 11:05:53 +08:00

然后可以在 page+1 后调用 fullgc 虽然可能不会起作用

nekoneko

2019-09-04 11:12:18 +08:00

然后写文件别用 printwriter

cccy0

2019-09-04 13:44:30 +08:00

@nekoneko #6 xms xmx 调大点是可以, 但是我把它放在新线程中运行就不 OOM 了不知道是为啥原因

Raymon111111

2019-09-04 19:42:12 +08:00

如果想细查的话可以分析下 dump 文件