如何解决16gb似乎不足以在Kotlin中解析1gb JSON,我可以优化代码吗?
我有一个1gb json文件,我想在Kotlin中进行解析。我为此使用jacksonObjectMapper。
val mapper = jacksonObjectMapper().disable(DeserializationFeature.FAIL_ON_UNKNOWN_PROPERTIES)
val b : List<Profile> = mapper.readValue(File("$path/$inputFile2").readText())
堆空间不足,只有13gb,所以我增加到16gb(即使我的Windows 10笔记本电脑只有16gb RAM,所以我没想到这会起作用),并且IntelliJ在等待15分钟以进行解析后不再反应完成。不过,它不再警告该设置中的“堆空间不足”。
我可以在代码中进行一些更改以使其在我的16GB RAM机器上运行吗?也许将其作为CMD中的jar运行?
一个1gb的文件占用这么多的空间并不奇怪吗?
解决方法
感谢您的评论@fluidsonic。
json是40万个对象的列表。
我现在要做的是以某种方式组织json文件,以便每行包含1个对象。然后,我正在执行以下操作:
File("$path/$inputFile2").readLines().forEach {
val x: Profile = mapper.readValue(it)
// + logic
}
我相信这本可以做一些不同的事情,但是它像魅力一样工作。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。