7.1 全量数据初始化
创建于 2022-10-21 / 最近更新于 2022-11-04 / 2556
字体:
[默认]
[大]
[更大]
观远数据开发平台基于工作流定义提供的强大的任务调度能力,可以通过批处理的方式进行离线数据的同步与开发,同时对于大数据量场景下的全量数据初始化,可以提供更加可靠的性能保障。因此我们推荐的最佳实践为:
采用工作流进行全量数据的初始化;
采用实时流进行增量数据的实时同步。
在着手配置实时流之前,我们需要通过工作流进行全量数据初始化,同时进行Binlog位点信息的记录,便于后续在配置实时流时定义MySQL增量数据开始同步的起始位点。
1 人点赞过