winunify
本站致力于IT相关技术的分享
  文章分类
数据工程 8 后端架构 7 MLOps 3 分布式架构 3 云原生 1 分布式系统 3 全栈架构 2 DevOps 1 数据工程与存储 1 安全架构 1
构建基于Playwright、NATS JetStream与数据湖的弹性非结构化数据采集总线 构建基于Playwright、NATS JetStream与数据湖的弹性非结构化数据采集总线
获取高质量、结构化的API数据是一回事，但现实世界中，大量关键信息被锁定在动态渲染、需要复杂用户交互才能访问的Web应用里。单纯依赖API，我们丢失了用户视角下的真实页面呈现、第三方脚本行为以及通过交互才能触发的数据。最初我们尝试构建一个简
2023-10-27 数据工程
Playwright Data Lake NATS JetStream TypeScript MinIO
基于Spring Boot与Cassandra构建支持DVC版本追溯的高吞吐实时特征API 基于Spring Boot与Cassandra构建支持DVC版本追溯的高吞吐实时特征API
在任何严肃的机器学习系统中，训练-服务偏斜（Training-Serving Skew）都是一个潜藏的、难以根除的顽疾。其中一个核心诱因，就是线上实时推理所用的特征，与线下模型训练所用的特征，在生成逻辑上出现了细微但致命的偏差。问题的根源在
2023-10-27 数据工程
Spring Boot Loki API 设计 Cassandra DVC
2 / 2