Datastage run 有时候太慢 有时候performance 还Okay
来源:互联网 发布:圣诞玫瑰结局真相知乎 编辑:程序博客网 时间:2024/05/16 15:17
US team 同事 开发了一个prod_dimnsn 的job ,job 之大让人很是无语 ,一个job 里面 大概用到了不下 50 个stage ,虽然只有简单的60W 数据 ,但是 真个job 里面用了 太多来的 lookup change capture ,增加了内存的开销 , 通过admin 的反馈 我们看到 最高memory 用了 98% ,所有这个job 有时候run 4 个 多小时 ,最快 20 分钟 就 应该结束的 。 当然系统上还有其他jobs 也在run
为了减少run 的时间 ,我们采用split job to small pieces 。
0 0
- Datastage run 有时候太慢 有时候performance 还Okay
- 有时候
- 有时候
- 有时候
- 有时候
- 有时候
- 有时候
- 有时候
- 有时候
- 有时候
- 有时候有时候
- 有时候我们太相信爱情
- 女人有时候不能太挑剔
- mysql为啥有时候那么慢
- 有时候太理智也是一种错误
- 有时候突然发觉自己太无知
- 有时候还逃课的视频转换
- 有时候,人不能太好,我总是心太软!
- 字符串转整形--java
- 设计模式(二十一)中介者模式
- 基于mac,ndk开发,使用android studio 编译ffmpeg(二)
- Retrofit和RxJava结合使用例子分析
- MyBatis上手
- Datastage run 有时候太慢 有时候performance 还Okay
- DateTime.Now.ToString("yyyyMMddHHmmss");
- 初尝git and github
- Mysql增删改查语句
- POJ 2914 Minimun Cut (Stoer-Wagner, 无向图最小割)
- linux命令
- 【HUSTOJ】1010: 较大的数II
- 剑指Offer--033-把数组排成最小的数
- final/override控制