归档: 2023/10

2023

10

27

我们面临一个棘手的需求：一个外部系统通过HTTP API推送关键业务事件，我们的后端系统必须对这些事件进行有状态的流式处理，并且从数据接收到处理完成，整个链路必须保证“精确一次”（Exactly-Once）语义。任何事件的丢失或重复处理都可

2023-10-27 数据工程

Apache Flink Koa ActiveMQ GitHub Actions Babel

27

在维护一个混合技术栈的系统时，一个常见且棘手的问题是如何优雅地让不同语言构建的服务协同工作。当我们的核心后端是基于 NestJS (Node.js) 构建，而大量的数据处理、机器学习或长耗时任务依赖于 Python 生态的 Celery 时

2023-10-27 后端架构

Celery NestJS 网关与代理分布式系统异构集成

27

团队内部的构建和测试流程正逐渐演变成一场灾难。每个项目都有一套独特的、由Makefile、package.json脚本和大量bash脚本粘合而成的自动化体系。新成员需要数天时间才能在本地成功运行一次完整的测试，而CI环境则是一个没人敢碰的黑

2023-10-27 DevOps

Dart Podman Clojure IDP CI/CD

27

定义问题：特征工程中的零信任摄取挑战在机器学习系统中，特征存储（Feature Store）是连接数据管道与模型训练/推理的枢纽。一个关键挑战在于如何构建一个安全、低延迟、高可用的实时特征摄取（Ingestion）层。数据源可能来自内部的多

2023-10-27 分布式架构

Google Cloud Functions Feature Store 分布式与中间件 mTLS