hefylia
本站致力于IT相关技术的分享
  文章分类
后端架构 8 数据工程与存储 1 分布式系统 5 分布式架构 3 架构与设计 2 MLOps 3 DevOps 1 前端工程化 2 云原生 1 架构设计 1 基础设施安全 1
构建跨云厂商的 RocketMQ 集群以实现灾备与业务连续性 构建跨云厂商的 RocketMQ 集群以实现灾备与业务连续性
业务的连续性要求我们的核心消息链路具备地域级容灾能力。当单一云服务商的某个区域（Region）出现整体故障时，服务必须能够在另一个区域甚至另一个云服务商的基础设施上快速恢复。摆在面前的技术决策是：如何构建一个跨越不同云厂商（例如AWS和阿里
2023-10-27 分布式架构
分布式与中间件 云服务商 RocketMQ
构建基于 Delta Lake 的事件溯源 IoT 状态机与 Serverless 投影 构建基于 Delta Lake 的事件溯源 IoT 状态机与 Serverless 投影
管理数百万计的物联网设备状态是一场持久战。我们最初的方案是传统的 CRUD 模型，直接在 PostgreSQL 中更新设备最新状态。很快，并发写入导致了大量的锁竞争和数据覆盖问题，状态更新的竞态条件几乎无法根除。更致命的是，我们完全丢失了设
2023-10-27 分布式架构
Fastify Event Sourcing Delta Lake OpenFaaS
构建基于Zookeeper与容器编排的动态数据库分片控制平面 构建基于Zookeeper与容器编排的动态数据库分片控制平面
当单体MySQL的写入吞吐量达到每秒几万次时，垂直扩展的成本和物理极限开始显现。我们的监控面板上，IOPS和CPU使用率曲线像心电图一样剧烈波动，每一次业务高峰都像是一次对SRE团队的压力测试。手动分片？我们尝试过。那是一段充满mysqld
2023-10-27 分布式架构
Zookeeper 数据库分片 容器编排 Redis AWS SNS