2022年7月重要功能更新

以下功能在2.9.0及之后的版本中均可使用

数据流-"Null值替换"节点支持批量操作

• 应用场景

数据流开发过程中，数据集字段很多的且需要进行"Null值替换"清洗操作的情形下，单个字段的选择配置方式效率很低。

• 功能介绍

在"Null值替换"节点提供字段批量选择的功能

批量选择字段的默认替换规则为"空字符串"，用户可以自行进行自定义值的替换规则配置

数据集去重主键、分区字段设置异步优化

• 应用场景

在对数据量较大的数据集进行主键和分区修改的时间会比较长，需要用户在前端等待修改任务完成，等待期间也无法切换到其他页面进行操作。

• 功能介绍

在允许对数据集进行主键及分区变更的功能位置优化变更操作为异步执行的方式，且主键与分区的修改动作不能同时发起。

数据中心-数据集

AI项目-DataSets

AI FLOW-CODE节点输出数据集

用户密码设置策略增强

• 应用场景

为适配企业级风险管控要求，保证开发及数据安全，平台对密码设置策略进行强化。

• 功能介绍

1.用户密码设置采用强口令

入口：用户信息-修改密码

按提示要求验证当前登录密码并输入新密码，新密码需符合：

1）密码长度：8~32个字符

2）密码由大写字母、小写字母、数字、符号至少3种组成

修改完成后，即可使用新密码重新登录平台。

2.弱密码强制修改

历史上存在不符合规范的弱密码，或管理员重置密码后强度过低的场景下，管理员可选择是否需要对此类弱密码进行强制修改。

入口：管理中心-企业设置-密码策略

开启[弱密码强制修改]开关后，将在用户登录时对密码强度进行校验，若密码不符合上述规范，将自动跳转至密码修改界面，修改为合规新密码后，再次登录方可进入平台。

SQL语法校验流程优化

• 应用场景

在加入SQL语法校验功能后，若校验不通过，平台不支持留存已撰写的SQL语句，若需稍后修改内容，往往需要将SQL语句另存至其他编辑器，操作不便。因而支持将未校验通过的SQL语句暂存下来，方便用户后续基于该内容进行修改。

• 功能介绍

若语法校验未通过，在退出SQL编辑框时，将会弹出保存提示：

单击[保存]，将保留已完成检测的SQL语句，并在算子外侧进行风险提示，提示信息为本次校验的SQL语句错误详情。

同样地，若语法校验通过，但未点击[确定]直接退出，将进行退出提示，选择[保存]，将保留已检测的SQL语句，该算子将置为正常状态。

数据探查图表性能及展示优化

• 功能介绍

针对数据探查功能展示及统计上的问题，在当前版本进行了优化。

1.性能优化

1）针对一页展示多列探查结果的性能进行了优化，保证页面访问流畅性；

2）针对计算逻辑进行优化，保证大数据量探查时的访问速度及系统服务的稳定性；

2.展示效果优化

1）统计值展示更精确，hover可展示数据详情；

2）坐标值展示防重叠；

“节点运行”支持指定工作流参数

• 应用场景

当只需要跑工作流的下游几个模块以适配快速测试等场景时，如需修改运行参数，当前需要将前置节点禁用后，再添加参数运行，运行完成后再将已禁用的节点恢复，操作流程长，且易忘记临时禁用的节点。

• 功能介绍

在节点上单击运行时，支持对本次运行进行参数再赋值，效果等同于工作流赋值参数后运行。

用户体验优化专项

• 功能介绍

1.数据流支持对上下游高亮展示

hover数据流某一节点时，将自动高亮展示其上下游所有关联节点，便于在复杂的数据流场景中，快速区分该节点所影响的生产链路。

2.数据连接支持进行联通性测试

在数据连接列表页，无须输入连接密码，单击“测试连接”，即可验证当前数据连接是否处于可用状态。

数据文件上传及批量导出优化

• 功能介绍

1.在数据结构批量导出时，适配数据集名称超过31个字符截断及数据集重名报错的问题，导出时默认将数据集名称放置在各数据结构的首列进行展示。

2.在数据结构导入时，数据结构导入时，不以[文件名+sheet页名]作为数据集名称，将自动识别并代入位于首列的数据集名称信息。（对过往版本数据结构规范进行适配，如未找到”数据集名称”列，默认取sheet页名称作为数据集名称）

3.创建数据结构时，支持上传csv文件并进行数据结构解析。

数据集支持对接Oracle Clob类型数据

当前，Oracle中Clob类型的数据接入到数据集后，无法正常显示字段内容。

针对Oracle Clob类型数据接入到数据集的类型转化为DeltaLake的STRING类型，能够正常展示数据内容