ecotopaim
本站致力于IT相关技术的分享
10
27
27
27
基于 NestJS 构建一个集成了 Puppeteer 网页抓取与 Milvus 向量化的实时 WebSocket 数据管道 基于 NestJS 构建一个集成了 Puppeteer 网页抓取与 Milvus 向量化的实时 WebSocket 数据管道
在处理一个需要即时响应用户输入,并执行长耗时、多阶段后台任务的场景时,传统的 HTTP 请求-响应模型显得力不从心。设想这样一个需求:用户提交一个 URL,系统需要立刻开始抓取该网页的动态渲染内容,对内容进行分块和向量化,最后存入 Milv
2023-10-27
27
利用键值型 NoSQL 在 AWS EKS 环境中为事件驱动架构实现分布式熔断与限流 利用键值型 NoSQL 在 AWS EKS 环境中为事件驱动架构实现分布式熔断与限流
在高并发的事件驱动系统中,一个常见的噩梦是下游服务的降级或失效。假设我们有一个运行在 AWS EKS 上的消费者集群,它们从 SQS 队列或 Kafka 主题中拉取消息,然后调用一个下游 gRPC 服务。如果这个下游服务响应变慢或开始频繁报
27
27
4 / 5