Universe 帮助中心

2020年12月重要功能更新

创建于 2022-10-28 / 最近更新于 2022-11-07 / 795
字体: [默认] [大] [更大]

数据质量模型规则支持数据通过率的容错设置

  • 数据质量模型中,“字段粒度”的规则支持设置数据通过率(默认为100%)

  • 如果设置通过率为60%,那么:当异常数据比例<=40%时该规则通过,当异常数据比例>40%时该规则不通过

数据质量模型的运行记录-质量报告中,在数据状态中新增对于“数据通过率”的阈值展示:

数据质量模型新增字段映射类校验规则

数据质量模型新增“字段粒度”规则:映射检查,支持针对两个字段进行“1对1”/“多对1”映射关系的校验。

QUALITY_MODEL节点支持设置异常失败开关

QUALITY_MODEL节点新增“校验异常”配置项:

  • QualityModel节点的“异常失败”开关默认开启:如果数据质量模型运行通过则任务节点运行成功,否则该任务节点运行失败;

  • 对于校验等级较弱的数据质量模型:支持关闭“异常失败”开关,无论质量模型是否运行通过,该任务节点都会运行成功。

数据集详情页支持展示相关的数据质量模型

  • 支持从数据集角度展示相关的质量模型,便于查看针对某数据集设置了哪些数据质量模型;

  • 数据集的删除会进行依赖判断:如果该数据集被质量模型进行引用,则不允许删除。

工作流/数据流中的更新数据集操作支持编辑前置SQL

工作流/数据流中的更新数据集节点支持编辑前置SQL:

  • SQL语句中可以使用“ __ DATASET __ ”指代已经选择的“数据集”(对于不存在主键的目标数据集,可以通过“先删后插”方式实现数据集的增量更新)

  • SQL语句中支持使用参数和变量:全局参数、工作流参数、动态变量

SQL-获取数据节点新增对Sybase数据源的支持

用户管理中新增对于资源转移的支持

管理中心支持将某用户名下的资源进行转移,针对每个项目,可以将该项目内的资源转移给具有该项目权限的用户;转移的资源包括:项目、工作流、数据流、数据质量模型等。

入口:管理中心-用户管理-用户转移

删除用户/将用户移除项目权限时,需要判断该用户名下是否还存在未转移的资源:


0 人点赞过