问答 查看内容
返回列表

ETL预览时报错Job Cancelled due to numRows limit and table expansion rate limit

46 1
发表于 6 天前 | 查看全部 阅读模式

ETL上为什么报错:
Job Cancelled due to numRows limit and table expansion rate limit, the numRows threshold is 5000000000 rows, the table expansion rate threshold is 100

评论1

观小析楼主Lv.1 发表于 6 天前 | 查看全部
该报错是出现了数据膨胀,ETL过程中有出现行数超过50亿,且膨胀率超过100倍的情况,导致ETL的任务被取消,请检查ETL的处理逻辑,特别是关联算子、SQL算子、explode函数的使用 等可能出现数据膨胀的地方。

回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

微信服务号
联系我们
电话:400-880-0750
邮箱:hello@guandata.com
Copyright © 2001-2025 观远社区 版权所有 All Rights Reserved. 浙 ICP 备15006424号-3
去回复 去发帖 返回顶部
快速回复 返回顶部 返回列表