Kettle 抽取数据限速了
kettle吧
全部回复
仅看楼主
level 1
MO_vivix 楼主
最近抽取数据发现永远都是130条就上限了，速度提不上去，用公司自己开发的渣渣etl也能稳定在1400条每秒左右，是从内网不同网段抽取的数据， 按理说不会这么慢，难道是因为我设置的java内存20个G比较大不合理？我从本地获取数据也有上万条每秒，导出文本也正常，这个应该如何排查问题？[黑线]
2018年08月24日 00点08分 1
level 7
RenGuanyuX
一般就是网络、数据库索引引发性能问题吧
2018年10月07日 13点10分 2
MO_vivix
跟网络没啥关系,我用datax抽取也有1m/s的样子,数据库索引这个不太清楚,我直接查询操作返回值的速度是正常的,换其他工具抽取也蛮快,就kettle慢
2018年10月08日 02点10分
level 1
小小一颗糖
楼主，我现在也碰到了同样的问题，从不同网段linux虚拟机数据库往windows上的数据库抽，在同一台电脑上，速度也是130每秒，开了多进程也没用，想问下楼主最后知道是哪里问题吗?怎么解决的啊[狂汗]
2019年08月07日 14点08分 3
MO_vivix
没有解决 毕竟也停留在用的这个层面，后面换的其他工具抽取
2019年08月08日 02点08分
gpogpogpo
什么工具啊？
2020年03月04日 01点03分
level 3
孤狼丶扬扬
同样遇到这个问题，每秒130条数据，请问您用的其他什么工具抽数的呢
2020年03月12日 02点03分 4
1