2020年12月重要功能更新
创建于 2022-10-28 / 最近更新于 2022-11-07 / 1448
字体:
[默认]
[大]
[更大]
数据质量模型规则支持数据通过率的容错设置
数据质量模型中,“字段粒度”的规则支持设置数据通过率(默认为100%)
如果设置通过率为60%,那么:当异常数据比例<=40%时该规则通过,当异常数据比例>40%时该规则不通过
数据质量模型的运行记录-质量报告中,在数据状态中新增对于“数据通过率”的阈值展示:
数据质量模型新增字段映射类校验规则
数据质量模型新增“字段粒度”规则:映射检查,支持针对两个字段进行“1对1”/“多对1”映射关系的校验。
QUALITY_MODEL节点支持设置异常失败开关
QUALITY_MODEL节点新增“校验异常”配置项:
QualityModel节点的“异常失败”开关默认开启:如果数据质量模型运行通过则任务节点运行成功,否则该任务节点运行失败;
对于校验等级较弱的数据质量模型:支持关闭“异常失败”开关,无论质量模型是否运行通过,该任务节点都会运行成功。
数据集详情页支持展示相关的数据质量模型
支持从数据集角度展示相关的质量模型,便于查看针对某数据集设置了哪些数据质量模型;
数据集的删除会进行依赖判断:如果该数据集被质量模型进行引用,则不允许删除。
工作流/数据流中的更新数据集操作支持编辑前置SQL
工作流/数据流中的更新数据集节点支持编辑前置SQL:
SQL语句中可以使用“ __ DATASET __ ”指代已经选择的“数据集”(对于不存在主键的目标数据集,可以通过“先删后插”方式实现数据集的增量更新)
SQL语句中支持使用参数和变量:全局参数、工作流参数、动态变量
SQL-获取数据节点新增对Sybase数据源的支持
用户管理中新增对于资源转移的支持
管理中心支持将某用户名下的资源进行转移,针对每个项目,可以将该项目内的资源转移给具有该项目权限的用户;转移的资源包括:项目、工作流、数据流、数据质量模型等。
入口:管理中心-用户管理-用户转移
删除用户/将用户移除项目权限时,需要判断该用户名下是否还存在未转移的资源:
0 人点赞过