doabled
本站致力于IT相关技术的分享
  文章分类
云原生与 DevOps 1 DevOps 2 后端架构 2 分布式架构 4 可观测性 5 架构与设计 2 MLOps 1 DevSecOps 1 架构设计 5 数据工程 3 全栈开发 1 分布式系统 1 Web架构 1 安全 1
构建基于 Ray 的分布式 Solr 索引管道以驱动 ISR 页面近实时更新 构建基于 Ray 的分布式 Solr 索引管道以驱动 ISR 页面近实时更新
我们面临一个棘手的伸缩性问题。生产环境的 SolrCloud 集群承载着数十亿级别的文档，并且每日新增数据量巨大。传统的增量索引方式，即直接将新文档推送到 Solr 集群进行处理和提交，已经触及了瓶颈。在高峰期，大量的索引写入请求严重影响了
2023-10-27 分布式架构
ISR Vitest Solr Ray 分布式一致性
使用Koa ZeroMQ与Cilium构建云原生事件溯源Kanban工作流引擎 使用Koa ZeroMQ与Cilium构建云原生事件溯源Kanban工作流引擎
挑战定义：实时协作下的状态一致性难题构建一个支持多人实时协作的Kanban（看板）系统，核心挑战并非UI渲染，而是后端状态管理。一个典型的场景：两名用户同时将同一张卡片从“待处理”拖拽到不同列——“进行中”和“已完成”。在传统的基于CRUD
2023-10-27 分布式架构
Kanban Koa ZeroMQ Cilium 事件溯源 微服务
基于Scala与自定义ISR日志实现Qdrant高可用向量摄入网关 基于Scala与自定义ISR日志实现Qdrant高可用向量摄入网关
系统入口的写入请求，如果直接透传到后端的有状态服务，尤其像Qdrant这样的向量数据库，会面临一个直接的脆弱性：数据库的短暂抖动、网络分区或写入压力过大，都会直接导致请求失败。客户端被迫实现复杂的重试逻辑，而系统整体的写入可用性则完全取决于
2023-10-27 分布式架构
Scala Qdrant ISR 网关与代理
Pulsar驱动的实时向量摄取架构在Vue与React Native前端的应用实现 Pulsar驱动的实时向量摄取架构在Vue与React Native前端的应用实现
定义一个棘手的技术问题：如何为一个跨平台应用（同时服务Vue.js Web端和React Native移动端）构建一个知识库系统，使用户提交的非结构化文本内容，能在数秒内通过语义相似度被检索到？这里的核心挑战在于，Embedding过程（将
2023-10-27 分布式架构
Vue.js React Native Pulsar ChromaDB 前端