企业进行数据移动主要的步骤如下:
数据移动的步骤
首先需要分析待处理的数据信息,查看其元数据以及血缘关系分析,梳理待移动数据的上下游关系,保证数据间的依赖关系不会在移动过程中丢失或破坏。
数据的移动分为两类增量和全量移动,企业根据不同的业务场景选择不同的移动类型。一般来说,历史数据通过全量移动的方式进行批量移动。后面的新增的业务数据,通过增量的方式进行数据同步。
数据移动过程中,要对数据移动任务进行实时监控,保证任务运行的效率与稳定性。除此之外,数据的前后一致性也是重要指标。这里企业需要借助于专业的数据质量管理工具,定期对移动的数据进行一致性校验,保证数据的正确性。
用友云数据移动(intelliN)
用友云数据移动(intelliN)是全新一代的数据同步产品,作为用友数据中台的重要产品模块,提供了全新一代的数据同步和接入产品功能,支持多种数据源的数据同步和交换,支持数据全量、增量实时的进行数据迁移。数据移动是一个数据同步、清洗和计算的平台,提供集群化的部署扩展方式,支持数据缓存,数据背压感知等一系列针对数据处理高可靠性的处理功能,主要有以下几大基础功能:
·可视化的数据移动建模,支持不同原子处理器的组合使用,可以方便的对不同数据来源和目的数据的同步任务构建。
·支持集群化的扩展方式,保证数据任务的高可用和故障转移恢复。
·数据处理过程支持中间结果的缓存和恢复。
·根据源和目的端的处理速率,依靠处理队列进行数据的背压调节。
用友云数据湖财务解决方案
用友云数据中台利用数据移动intelliN的数据处理能力以及BigFusion的大数据计算能力,为某能源企业搭建了事项会计大数据平台。通过用友云数据移动intelliN实现了
·从多个业务系统全量、增量地汇集数据信息入湖
·对各个数据处理任务进行实时监控与预警
·支持任务在多节点并行执行,以及资源的集群扩展方式
用友数据中台扎根于财务领域,覆盖能源、医药、政府、金融、军工等11个行业,为企业提供大数据解决方案。通过大数据技术、帮助企业解决多系统、多数据源、多类型的数据集中问题。