ecogofit
本站致力于IT相关技术的分享
  文章分类
分布式架构 8 数据工程 4 可观测性 2 平台工程 1 软件工程与架构 1 架构设计 3 前端架构 1 MLOps 2 全栈开发 3 DevOps 6 架构与设计 2 后端架构 6 分布式系统 3 安全架构 1 云原生与运维 1 云原生与DevOps 1 数据工程与存储 1 系统设计 1
基于 Raft 与 AWS SNS 构建一个分布式实时特性开关服务的实践 基于 Raft 与 AWS SNS 构建一个分布式实时特性开关服务的实践
最初的需求是在一个迭代周期（我们遵循Scrum）中提出的：我们需要一个高可用的特性开关（Feature Flag）系统。团队厌倦了依赖配置文件和复杂的部署流程来切换功能。市面上的商业方案因数据隐私和成本问题被否决，而基于Redis的简单方案
2023-10-27 分布式系统
Raft 协议 AWS SNS Caddy Qwik Scrum
构建基于OCI的动态Puppeteer工作负载调度网关并利用CockroachDB实现任务持久化与全文检索 构建基于OCI的动态Puppeteer工作负载调度网关并利用CockroachDB实现任务持久化与全文检索
在规模化场景下运行无头浏览器（Headless Browser）任务，尤其是像 Puppeteer 这样的资源密集型应用，从来都不是一件简单的事。内存泄漏、僵尸进程、环境依赖地狱，这些问题在并发量上来之后会变得极其尖锐。最初的方案往往是一个
2023-10-27 分布式系统
CockroachDB Puppeteer 网关与代理 搜索 OCI
为多租户 Spark 集群构建基于 Tonic 的即时 IAM 凭证颁发服务 为多租户 Spark 集群构建基于 Tonic 的即时 IAM 凭证颁发服务
在管理一个共享的、多租户的 Apache Spark 集群时，数据访问的权限控制是一个无法回避的核心挑战。当不同的租户作业需要在隔离的 S3 存储桶中读写数据时，如何安全、动态地为其授予最小权限，同时避免凭证泄露，成为架构设计的关键。一个常
2023-10-27 分布式系统
IAM gRPC Rust Apache Spark Tonic