kettle同步大表提示java内存溢出
【问题分类】数据导入导出
【关键字】数据同步,kettle,数据迁移,java内存溢出
【问题描述】kettle同步大表提示ERROR:could not create the java virtual machine!
【问题原因分析】java内存溢出
【解决/规避方法】
①增加JVM的堆内存大小。编辑Spoon.bat,增加堆大小到2GB,如:
if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms512m" "-Xmx512m" "-XX:MaxPermSize=256m" "-Dsun.jnu.encoding=UTF8" #其中-Xms是初始堆大小,-Xmx是最大堆大小。 |
②优化Kettle转换。检查步骤是否有优化空间,例如通过调整批量大小、优化数据库查询、减少不必要的步骤等。
③通过PARALLELISM参数的值合理设置并行线程数,如:
ꄘ0
友情链接:深圳计算科学研究院 深圳崖山科技有限公司
版权所有© 深圳崖山科技有限公司 粤ICP备2022018810号
公众号
加入技术交流群
YashanDB
崖山数据库系统YashanDB是深圳计算科学研究院自主设计研发的新型数据库管理系统,融入原创的有界计算、近似计算、并行可扩展和跨模融合计算理论,可满足金融、政企、能源等关键行业对高性能、高并发及高安全性的要求。
邮箱:info@yashandb.com
地址:广东省深圳市龙华区民宝路红山6979园区25座5-10层