归档: 2023/10 | winunify

2023

10

27

最初的问题很简单：我们需要将海量的遥测事件从C++服务集群实时写入ClickHouse。最初的实现也同样简单，每个事件都通过一个HTTP POST请求直接发送。当QPS只有几百时，一切安好。但随着业务增长到数万QPS，这个模型迅速崩溃。Cl

2023-10-27 后端架构

C++ ClickHouse CI/CD GitOps 高性能

27

处理工业物联网（IIoT）数据流的挑战不在于其总量，而在于其结构。一个典型的场景是数百万台设备，每台设备每秒上报数十个遥测点。这种“高基数”特性，即拥有大量唯一时间序列标识符（如设备ID），会迅速摧毁传统时序数据库的索引性能。更棘手的问题是

2023-10-27 数据工程与存储

Pulsar TimescaleDB Azure EventSourcing IoT

27

我们团队的微服务体系深度依赖 etcd 进行服务发现和配置管理。最近，前端团队遇到了一个棘手的状态同步问题。一些关键的业务功能开关、A/B测试的分流配置，都存储在 etcd 的一个特定前缀下。前端应用需要实时感知这些配置的变化，以动态调整U

2023-10-27 后端架构

Pinia 微服务 etcd WebSocket Golang

27

用户更新了个人资料，点击保存，刷新页面后却看到了旧的信息。这个场景在任何采用数据库读写分离架构的系统中都可能发生。问题的根源在于主库写入成功后，数据同步到从库存在延迟。当用户的下一个读请求被路由到尚未同步完成的从库时，返回的就是旧数据。这严

2023-10-27 分布式架构

Pulsar WebSocket 读写分离 MobX 最终一致性

27

在处理大规模数据集的交互式分析场景中，传统的请求-响应模型往往会遭遇瓶颈。用户在前端界面调整一个筛选参数，可能需要等待后端完成数秒甚至数分钟的完整计算，才能看到结果。这种延迟严重破坏了数据探索的流畅性。我们的目标是构建一个架构，让前端的数据

2023-10-27 全栈架构

Node.js WebSocket Zustand Headless UI Pandas

27

管理机器学习模型的生命周期是一项比想象中更复杂的任务。当团队从几个模型扩展到几十上百个时，依赖CI脚本、手动配置和环境变更记录的传统方式会迅速演变成一场灾难。模型版本、部署环境、资源配置之间的关系变得模糊不清，每一次发布都伴随着风险，而且几

2023-10-27 MLOps

BentoML 基础设施即代码 (IaC) Event Sourcing 分布式与中间件 Kit