Summer Blog

分布式系统基础设施

分布式缓存

持久化存储

消息系统 ActiveMQ

ActiveMQ完整支持JMS规范。JMS支持两种消息收发模型:

高可用:

垂直搜索引擎 Lucene

垂直化搜索引擎在分布式系统中十分重要,它能够解决全文搜索、模糊匹配、解决数据库like查询效率的问题;又能解决分表、分库、NoSQL导致的多表关联或者复杂查询问题

重要概念:

索引构建过程

Lucene索引构建过程

索引搜索过程

Lucene索引搜索过程

分布式拓展

搜索应用可以忍受一定的数据延迟,大部分情况只需保证最终一致性。基于这个特性,可以使用读写分离的做法。每个query server实例保存一份完整索引,然后由生成索引的dump server周期性的推送替换,这样可以避免集群索引dump对后端数据造成压力

当搜索压力更大时,单机的存储、搜索能力会不足,需要对索引进行切分,将索引分布到集群的各个机器上,然后通过merge server将查询请求分发,并且对结果合并

更多

https://www.chedong.com/tech/lucene.html

https://doc.yonyoucloud.com/doc/mastering-elasticsearch/chapter-1/11_README.html


comments powered by Disqus