datakfy
本站致力于IT相关技术的分享
基于 Raft 与 Algolia 构建高可用分布式配置系统的 CQRS 架构实践 基于 Raft 与 Algolia 构建高可用分布式配置系统的 CQRS 架构实践
一个看似简单的分布式配置管理系统，在生产环境中，往往要同时满足两个相互冲突的核心需求：写入操作必须保证强一致性与高可用性，任何配置的变更都不能丢失或产生冲突；而读取与搜索操作则需要极致的速度、模糊匹配和高并发能力，以供成百上千的服务实例或开
2023-10-27 分布式系统
Raft 协议 API 设计 Algolia Nuxt.js Lit
构建基于SAML与SNS的自动化代码审查安全门禁 构建基于SAML与SNS的自动化代码审查安全门禁
团队的代码审查（Code Review）流程一度陷入瓶颈。安全规范的检查依赖人工，不仅效率低下，且标准难以统一，关键漏洞时常在合并后才被发现，修复成本极高。最初的解决方案是引入一个简单的CI/CD Webhook，在每次提交Pull Req
2023-10-27 DevSecOps
Code Review AWS SNS SAML AWS Lambda AWS Step Functions
构建基于 Consul KV 与 Knative 的微前端动态样式注入方案 构建基于 Consul KV 与 Knative 的微前端动态样式注入方案
在设计一个基于 Knative 的多租户微前端 SaaS 平台时，一个核心的技术挑战浮出水面：如何为成百上千的租户提供动态、隔离且可即时更新的品牌化样式方案。每个租户都要求拥有独特的视觉主题——包括颜色、字体、Logo、布局间距等，而这些主
2023-10-27 云原生
架构设计 Consul Knative 微前端
构建从 Kafka 到 Pinecone 的实时向量摄取服务 Swift 实现与 Cilium 安全加固 构建从 Kafka 到 Pinecone 的实时向量摄取服务 Swift 实现与 Cilium 安全加固
问题的起点非常明确：一个持续产生高流量事件的Kafka topic，其消息体是半结构化的用户生成内容。业务需求是将这些内容实时向量化并存入Pinecone，以支持下游的相似性搜索和推荐服务。团队现有的Python消费者在应对峰值流量时表现出
2023-10-27 后端架构
Pinecone Kafka Swift Cilium 消息队列
在容器编排环境中基于外部状态存储实现Dask调度器的高可用架构 在容器编排环境中基于外部状态存储实现Dask调度器的高可用架构
一个长期运行的分布式计算任务，其调度器Pod因为节点故障或OOM而崩溃，所有计算状态瞬间蒸发。这是在生产环境中使用原生Dask时，我们不得不面对的严峻现实。Dask的中心化调度器（Scheduler）本身是一个单点故障（SPOF），尽管容器
2023-10-27 分布式系统
Kubernetes Dask CAP Theorem 容器编排 etcd
Ktor 与 Server-Sent Events 驱动的异步 Prettier 格式化服务实现 Ktor 与 Server-Sent Events 驱动的异步 Prettier 格式化服务实现
团队扩大后，前端代码格式化规范的统一成了一个不大不小的麻烦。虽然有 .prettierrc 和 husky，但总有人本地环境配置不当，导致 CI 阶段因为格式问题频繁失败。CI 流水线中执行 npm install 再运行 Prettier
2023-10-27 后端架构
Prettier Ktor Server-Sent Events GraalVM Kotlin
2 / 5