vitalyinc
本站致力于IT相关技术的分享
为MLOps实时特征存储构建可观测性后端的数据模型选型：Cassandra vs. CockroachDB 为MLOps实时特征存储构建可观测性后端的数据模型选型：Cassandra vs. CockroachDB
我们的机器学习模型流水线在投产后面临的首要挑战，并非模型本身的精度，而是数据。具体来说，是生产环境实时特征的数据分布漂移（Data Drift）和模型预测的概念漂移（Concept Drift）。定位这些问题的根源需要一个能够处理海量、高基
2023-10-27 架构设计
Cassandra CockroachDB MLOps 可观测性 Storybook
将单体NumPy计算任务改造为基于Docker和Redis的分布式处理架构 将单体NumPy计算任务改造为基于Docker和Redis的分布式处理架构
项目的计算模块最近遇到了一个典型的性能瓶颈。最初，它只是一个用于处理传感器数据的Python脚本，核心是几个密集的NumPy操作，比如对高维矩阵进行傅里叶变换和应用一系列复杂的滤波器。在开发阶段，处理单个数据文件耗时几秒钟，完全可以接受。但
2023-10-27 后端架构
Redis NumPy 数据处理 Docker 分布式
实现一套由NoSQL文档驱动的动态微前端UI组合层 实现一套由NoSQL文档驱动的动态微前端UI组合层
一个日益庞大的企业级中后台系统，其首页仪表盘的迭代需求正变得无法管理。业务方A希望他们的销售统计卡片放在最显眼的位置，市场部B则要求他们的活动监控图表能随时上线，而数据分析团队C又需要动态增删他们的报表组件。每一次微小的布局调整或组件上下线
2023-10-27 前端架构
Babel NoSQL Chakra UI 微前端 React Webpack MongoDB
集成 Kotlin Multiplatform 业务逻辑与 Jotai 状态管理的微前端架构 集成 Kotlin Multiplatform 业务逻辑与 Jotai 状态管理的微前端架构
项目演进到一定阶段，前端应用的拆分几乎是必然选择。微前端架构解决了团队自治和独立部署的问题，但引入了新的复杂度：如何在多个独立的微应用之间维持业务逻辑的一致性。复制粘贴代码是灾难的开始，传统的 NPM 包方式在频繁迭代时又会导致版本管理的混
2023-10-27 Web架构
Babel API 与架构 Kotlin Multiplatform Jotai Material-UI
基于 Crossplane 与 Rust 构建 AWS EKS 上的动态端到端测试环境编排器 基于 Crossplane 与 Rust 构建 AWS EKS 上的动态端到端测试环境编排器
端到端（E2E）测试环境的维护是一项成本高昂且极其脆弱的工作。在大多数团队中，通常存在一个或多个长期运行的、共享的 staging 或 qa 环境。这些环境状态不一，数据陈旧，并且由于多人同时使用，测试之间相互干扰，导致大量的 flaky
2023-10-27 云原生
Playwright AWS EKS Rust Crossplane
在Kubernetes上使用C++构建一个管理Delta Lake高频写入的Operator 在Kubernetes上使用C++构建一个管理Delta Lake高频写入的Operator
我们面临一个棘手的场景：一个需要以每秒数百次到数千次的频率，将小批量（几KB到几MB）数据写入同一个Delta Lake表的系统。传统的Spark Streaming或Flink作业，由于其微批处理的调度延迟和JVM启动/预热的开销，对于这
2023-10-27 数据工程
Delta Lake Kubernetes C++ Operator S3
4 / 5