使用 NineData 接入大数据
大数据接入通常从业务数据库开始,最终进入分析、搜索、流处理或数仓系统。难点不仅在于传输数据,还在于让管道可观测、可重复并可恢复。
当数据接入从数据库系统开始,且团队需要全量迁移、增量复制、任务监控、告警和一致性检查时,可以考虑使用 NineData。
| 模式 | NineData 的用途 |
|---|
| 数据库到数仓 | 将业务数据复制到 NineData 支持的分析型目标端。 |
| 数据库到 Kafka | 将数据库变更发送到基于 Kafka 的下游系统。 |
| 跨云接入 | 在云环境与自管理环境之间传输数据,并控制网络和凭证。 |
| 接入后校验 | 在迁移或同步任务后对比数据或结构一致性。 |