问答 查看内容
返回列表

评估ETL消耗的系统资源

211 1
发表于 2025-3-13 11:16:29 | 查看全部 阅读模式
内部打算对一批ETL进行迁移,把原本观远的加工逻辑迁移到数仓,现在想评估迁移的这部分能够为观远释放多少资源。请问,已知可以计算这批etl的cpu占用时长,占用磁盘空间等,还可以使用哪些指标来评估?(需要能够量化,因为即使我知道能够这批cpu占用时长,得到的也只是个数字,需要有对比或占比,类似释放cpu资源20%)。谢谢!

评论1

观小浩Lv.9 发表于 2025-3-17 16:08:18 | 查看全部
您好,默认条件下系统是做了双job分离的,即etl任务单独一个job engine并分配对应的资源CPU&内存。另外一个default job engine执行其余任务,如果etl部分完全迁移,则可以完全省出针对etl job engine配置的资源。该部分资源可以调整给default使用以增加其他任务的计算性能。

回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

微信服务号
联系我们
电话:400-880-0750
邮箱:hello@guandata.com
Copyright © 2001-2025 观远社区 版权所有 All Rights Reserved. 浙 ICP 备15006424号-3
去回复 去发帖 返回顶部
快速回复 返回顶部 返回列表