响应公司降本增效需求,针对业绩萎缩、服务器资源缩减情况,将原有Sphinx检索集群,重构为单服务器独立检索服务。独立完成技术调研、方案设计,选用Rust+Tantivy实现全文倒排索引,二次开发基于Tokio异步框架的lnx开源项目搭建Web服务;采用redb搭建二级缓存,开发Vue后台管理系统,完成全架构改造落地。
点击空白处退出提示
响应公司降本增效需求,针对业绩萎缩、服务器资源缩减情况,将原有Sphinx检索集群,重构为单服务器独立检索服务。独立完成技术调研、方案设计,选用Rust+Tantivy实现全文倒排索引,二次开发基于Tokio异步框架的lnx开源项目搭建Web服务;采用redb搭建二级缓存,开发Vue后台管理系统,完成全架构改造落地。
Tantivy检索系统
实现倒排索引创建和管理
开源Lnx修改
使用tokio实现REST API
后台管理
使用vue搭建后台,实现数据同步,测试统计以及设置
技术栈:Rust、Tantivy、lnx二次开发、Tokio、Vue、redb、全文倒排索引
1. 实现单机替代原有分布式Sphinx集群,大幅减少服务器占用,显著降低运维与服务器成本。
2. 单机高效承载5000万级问答帖子、百万级文章数据检索,支撑QPS 200左右并发请求,个人电脑测试。
3. 单次请求响应耗时仅几十毫秒,检索性能与稳定性优异,完全满足业务检索使用需求。
4. 轻量化架构落地,实现降本增效目标,保障平台核心检索服务稳定高效运行。
后期效果稳定性显著,逐步承接部分MySQL和ES功能



评论