问答 查看内容
返回列表

ETL对数据集进行分支筛选后,再进行行合并,合并后的行数比合并前的少

2522 1
发表于 2025-8-7 14:26:42 | 查看全部 阅读模式

同一个数据集,分支筛选后再进行合并,合并后行数变少
截图202508071425591300.png

评论1

观小程楼主Lv.1 发表于 2025-8-7 14:31:10 | 查看全部
1、判断是否存在列值筛选的内容
2、ETL内使用了排序函数进行数据筛选,特别是row_number喝开窗函数一起使用,由于开窗之后的排序是不固定的,因此每次出现的数据会有不同,这种情况下最好是有额外字段进行辅助处理
3、筛选条件是否使用了等于0的判断,当字段中数值字段是double类型,再去使用等于0这种判断就会存在判断精度问题,可以提前使用round函数固定小数位后再进行筛选处理

回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

微信服务号
联系我们
电话:400-880-0750
邮箱:hello@guandata.com
Copyright © 2001-2026 观远社区 版权所有 All Rights Reserved. 浙 ICP 备15006424号-3
去回复 去发帖 返回顶部
快速回复 返回顶部 返回列表