ecogofit
本站致力于IT相关技术的分享
  文章分类
分布式架构 4 可观测性 1 分布式系统 2 全栈开发 2 DevOps 4 后端架构 3 MLOps 1 安全架构 1 架构设计 2 软件工程与架构 1 云原生与DevOps 1 数据工程 2 数据工程与存储 1 系统设计 1 云原生与运维 1
利用 Dask 构建从 geo-distributed CockroachDB 到 ClickHouse 的弹性数据同步架构 利用 Dask 构建从 geo-distributed CockroachDB 到 ClickHouse 的弹性数据同步架构
一个典型的技术挑战摆在面前：我们的核心业务系统构建在 CockroachDB 之上，其 geo-partitioned 特性完美支撑了全球用户的低延迟读写。然而，分析团队需要对这些遍布全球的交易数据进行近实时的复杂查询，直接在生产 OLTP
2023-10-27 数据工程
CockroachDB 分布式系统 ClickHouse Dask ETL
基于CDC实现单一数据源到ClickHouse与Solr的近实时双写架构权衡 基于CDC实现单一数据源到ClickHouse与Solr的近实时双写架构权衡
在构建复杂的业务系统时，一个常见的技术挑战是数据需要以多种形式被消费。例如，核心业务数据存储在PostgreSQL或MySQL这类关系型数据库中，以保证事务的ACID特性；同时，运营和分析团队需要对这些数据进行高性能的即席SQL查询，这正是
2023-10-27 数据工程
Kafka 搜索 SQL ClickHouse Solr CDC