3个应用场景,教你实现异构数据同步

作者:finedatalink

发布时间:2023.7.7

阅读次数:448 次浏览

异构数据源是指不同类型、不同结构、不同格式的数据源,需要使用相应的数据治理工具或技术进行连接和集成,以便实现数据的统一管理和分析。

帆软推出的FineDataLink是一款低代码/高时效ETL工具,目前支持七大类型、30多种异构数据源之间的异构数据同步。本文基于不同用户需求模拟了使用帆软FDL进行关系型数据库、文件类数据源、接口类数据源等异构数据同步的3个应用场景

异构数据同步之关系型数据库

如果用户希望直接将大量SQLite数据抽取并同步写入MySQL数据库中,且不想要进行非常复杂的处理步骤,就可以使用数据同步节点,直接进行数据抽取并写入数据库中。

fdl-数据同步-数据库

如果数据抽取后需要进行一些复杂的操作,例如行列转换、数据关联、JSON解析等数据处理和转换,则可以使用生成数据转换功能,将根据数据同步节点的数据来源和去向设置,使用数据转换替代数据同步进行复杂的数据处理工作。

fdl-数据同步-数据转换

异构数据同步之文件类数据源

进行定时任务时,用户直接从Excel文件里面读取数据是比较常见的场景。当前帆软FDL数据同步节点的数据源类型支持服务器数据集。用户可以先在管理系统新建Excel文件数据集,然后再用数据同步节点去读取该数据集,进而实现从Excel文件里面读取数据的需求。

异构数据同步之接口类数据源

API

出于安全考虑,有时不允许用户直接访问数据库,而是以API的形式对外提供数据。此时需要使用FineDataLink通过API接口将数据抽取出并将其存放至对应的数据库中。

fdl-数据同步-API

简道云数据

如果用户不需要对简道云数据进行复杂的解析和处理,只希望直接进行数据同步,那么就可以使用FineDataLink的数据同步功能数据同步功能支持使用简道云数据源,直接将数据原表原样同步至指定的数据库,实现简道云数据下云处理

fdl-数据同步-简道云

通过使用帆软FDL,数据处理人员可以将多种异构数据源一键接入数据治理工具,使用灵活的ETL数据开发和任务引擎,为上层应用预先处理数据,帮助企业处理出质量更高、更利于展示与分析的数据。

除此之外,帆软FDL可以实时采集、处理和存储数据,对数据管道、数据开发、用户、系统配置进行统一管理,帮助企业解决数据孤岛问题,提升企业数据价值。

fdl-免费试用

数据集成平台产品更多介绍:www.finedatalink.com

                         

上一篇: 下一篇: