产品特性

易用性

数据接入平台仅需通过简单的界面配置,轻松完成数据上报、清洗,存储的链路搭建。屏蔽数据接入过程中底层复杂的系统搭建、组件运维过程。

弹性伸缩

无需预估业务容量,系统会根据流量规模自动弹性伸缩,保证波峰时系统可用性。按需使用,Serverless 化的完成数据接入、处理、转储的整个流程。

实时性

在数据采集、上报和流转整条链路过程中,实现秒级的接收、处理、并分发到下游系统。例如业务需要上报某个数据,并在ES中查询,如果使用 DIP 的数据链路,则客户端上报后,即刻(秒级)在 ES 可以查询。

高可用

支持接入层、处理层、分发层均为分布式跨可用区部署,遇到故障即可自动切换,服务可用性不低于99.9%。当系统故障时,数据会暂存在消息队列中,可保证数据100%不丢失。系统恢复后,会继续处理分发消息队列中的数据到下游。

安全性

数据接入平台支持不同租户间网络隔离,支持数据上报集成 CAM 鉴权、数据流转集成 SASL 权限控制,严格控制访问权限,保证数据安全。

丰富的上下游生态

支持云上、云下(跨云、混合云)场景、支持自建和云上服务的数据连接。上游集成日志、数据库、中间件、日志等多种数据源。实现了云上容器、COS、Elasticsearch Service、MySQL 和 PostgreSQL 等15+云上产品打通,一站式实现数据的接入和流动。

应用场景

  • 数据上报查询
  • 数据库变更信息订阅
  • 数据集成
  • 数据清洗/转储

数据接入平台 DIP 可应用在需要进行数据上报的场景。如手机 APP 的操作行为分析、前端页面的 Bug 日志上报、业务数据的上报等等。一般情况下,这些上报的数据都需要转储到下游的存储分析系统里面进行处理(如 Elasticsearch,HDFS 等)。在常规操作中,我们需要搭建 Server、购买存储系统、并在中间自定义代码进行数据接收、处理、转储等。流程繁琐,长期系统维护成本高。

DIP 旨在用 SaaS 化的思路解决这个问题,目标是通过如下两步:界面配置、SDK 上报,完成整个链路的搭建,并基于 Serverless 理念,以按量计费,弹性伸缩,无需预估容量等方式,简化客户的研发投入成本和实际的使用成本。

推荐产品

按照我们的 操作指南,只需点几次鼠标,即可搭建您的云上数据流转链路。