用户面临的挑战

业务复杂之后使用的数据源种类变多,导致接入数仓难。随着业务的发展数据量变大,给数据传输工作带来很大挑战。

数据量大的情况下传输慢
痛点描述
当业务的数据量变大了之后,采用传统的方式会遇到任务传输慢无法在规定的时间内传输完成,任务失败率上升多等问题。
易数方案
底层采用了 Spark 计算引擎,利用 Spark 的并发能力很好的解决了传输慢和任务失败率高等问题。
业务使用的数据源种类繁多,接入难
痛点描述
各种不同的数据源有不同的特点,每个数据源接入都从零开始进行对接将会耗费数仓开发的大量时间,后续的维护工作也是一个挑战。
易数方案
通过插件化的方式提供了多种数据源之间的数据交换能力,用户仅仅需要通过可视化的配置就能完成传输需求。
核心功能
丰富的数据源支持
可视化的任务开发
批量场景任务
目前数据传输均支持双向传输,插件化的开发方式可以做到接入一个reader可以写入到目前支持的所有writer中。
支持可视化的传输任务配置,选择数据来源与数据去向,对于配置的源端,支持流量控制,对于目标端支持不同的写入规则。
对于一个新接入数据源,可能有上千张表需要配置传输任务。针对此类场景,支持批量创建任务,批量对一个库下的表创建传输任务。
产品优势
大数据量传输
数据传输底层采用 Spark 技术引擎,Spark 的分布式能力可以很好的支持大数据量的数据传输
支持流控
对于常见的数据源支持了流控机制,可以很好的保护源端,目标端数据源的稳定性
丰富的数据源支持
Kafka,Rocketmq,Es,Mongo,Hbase,Kudu,Hive,MySQL,Oracle等

进一步了解网易易数

免费注册试用

电话咨询

0571-89926329

工作日 9:30-18:00

QQ群

1049199357

在线咨询

架构师咨询