walledeo
本站致力于IT相关技术的分享
  文章分类
MLOps 3 前端工程化 1 云原生 3 可观测性 6 分布式系统 4 数据工程 3 后端架构 4 分布式架构 1 API 网关 1 数据工程与存储 1 架构与设计 1 架构设计 1 前端架构 1
基于ActiveMQ与Chakra UI构建Jib容器化CV处理管道的实时监控系统 基于ActiveMQ与Chakra UI构建Jib容器化CV处理管道的实时监控系统
一个基于计算机视觉（CV）的图像审核服务最近遇到了瓶颈。任务提交后，业务方无法实时了解处理进度，只能被动等待结果。当任务处理延迟时，我们无法快速定位瓶颈是在消息队列积压，还是在CV模型推理缓慢。缺乏端到端的可观测性，让整个系统成了一个黑盒。
2023-10-27 分布式系统
可观测性 Chakra UI ActiveMQ Jib CV
构建基于 Pulsar 事件流的实时特征增强型 RAG 微服务架构 构建基于 Pulsar 事件流的实时特征增强型 RAG 微服务架构
要构建一个能应对生产环境复杂性的检索增强生成（RAG）系统，单纯依赖静态文档向量化是远远不够的。真正的挑战在于如何将非结构化的知识（文档）与实时变化的结构化数据（用户画像、商品状态等）高效融合，并以低延迟、高可用的方式提供服务。 一个常见的
2023-10-27 分布式系统
微服务 LlamaIndex Feature Store Pulsar
利用 Consul Session 与 KV 实现 Fastify 集群的滑动窗口速率限制 利用 Consul Session 与 KV 实现 Fastify 集群的滑动窗口速率限制
单体应用里的速率限制实现起来直截了当，一个内存中的哈希表加几行逻辑就能搞定。但在水平扩展的微服务架构里，这种方式立刻失效。每个 Fastify 实例都只维护自身节点的请求计数，无法对来自同一客户端的跨节点请求进行全局限制。这就导致实际的请求
2023-10-27 分布式系统
Consul 分布式一致性 Fastify 速率限制 Node.js
构建一个由MapReduce驱动的CQRS读写分离架构 构建一个由MapReduce驱动的CQRS读写分离架构
我们面临的初始场景并不罕见：一个运行了数年的核心分析平台，其数据心脏是一个庞大的Hadoop集群。每天凌晨，TB级的原始日志通过MapReduce作业进行聚合、转换，最终生成一系列覆盖业务全景的报表数据，存储在HDFS上。业务方对这些报表的
2023-10-27 分布式系统
MapReduce CAP Theorem CQRS API 与架构 Ant Design