AI 助理
备案控制台
开发者社区 大数据 文章 正文

Lucene/Solr 分布式与实时方案收集

2022-05-02 124
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 假期重新把之前在新浪博客里面的文字梳理了下，搬到这里。

标签： 

it

分类： 搜索技术

Katta  Lucene+hadoop

http://katta.sourceforge.net/

http://katta.sourceforge.net/about

 

Solr + Hadoop = Big Data Love

http://architects.dzone.com/articles/solr-hadoop-big-data-love

Bixo Labs http://bixolabs.com/

 

Hbase+Hadoop+solr  =Lily

http://www.lilyproject.org/lily/index.html

 

SolrCloud

http://wiki.apache.org/solr/SolrCloud

 

Nutch

http://nutch.apache.org/

 

Solr

http://solr.apache.org/

 

lucene+zookeeper = zoie

http://sna-projects.com/zoie/

 

Riak Search

http://www.basho.com/products_lab.php

 

Hadoop+Solr

How Rackspace Now Uses MapReduce and Hadoop to Query Terabytes of Data

http://highscalability.com/how-rackspace-now-uses-mapreduce-and-hadoop-query-terabytes-data

文章标签：
分布式计算
Hadoop
关键词：
分布式方案
solr分布式
lucene分布式
李雨前
目录
相关文章
请回答1024
|
7月前
|
存储 NoSQL Java
分布式锁中的王者方案 - Redission
分布式锁中的王者方案 - Redission
请回答1024
91 1
江-小北
|
14天前
|
消息中间件 SQL 中间件
大厂都在用的分布式事务方案，Seata+RocketMQ带你打破10万QPS瓶颈
分布式事务涉及跨多个数据库或服务的操作，确保数据一致性。本地事务通过数据库直接支持ACID特性，而分布式事务则需解决跨服务协调难、高并发压力及性能与一致性权衡等问题。常见的解决方案包括两阶段提交（2PC）、Seata提供的AT和TCC模式、以及基于消息队列的最终一致性方案。这些方法各有优劣，适用于不同业务场景，选择合适的方案需综合考虑业务需求、系统规模和技术团队能力。
江-小北
104 7
蓝易云
|
20天前
|
缓存 NoSQL Java
Spring Boot中的分布式缓存方案
Spring Boot提供了简便的方式来集成和使用分布式缓存。通过Redis和Memcached等缓存方案，可以显著提升应用的性能和扩展性。合理配置和优化缓存策略，可以有效避免常见的缓存问题，保证系统的稳定性和高效运行。
蓝易云
37 3
技术自由圈/原疯狂创客圈
|
18天前
|
消息中间件 架构师 数据库
本地消息表事务：10Wqps 高并发分布式事务的 终极方案，大厂架构师的 必备方案
45岁资深架构师尼恩分享了一篇关于分布式事务的文章，详细解析了如何在10Wqps高并发场景下实现分布式事务。文章从传统单体架构到微服务架构下分布式事务的需求背景出发，介绍了Seata这一开源分布式事务解决方案及其AT和TCC两种模式。随后，文章深入探讨了经典ebay本地消息表方案，以及如何使用RocketMQ消息队列替代数据库表来提高性能和可靠性。尼恩还分享了如何结合延迟消息进行事务数据的定时对账，确保最终一致性。最后，尼恩强调了高端面试中需要准备“高大上”的答案，并提供了多个技术领域的深度学习资料，帮助读者提升技术水平，顺利通过面试。
技术自由圈/原疯狂创客圈
39 0
本地消息表事务：10Wqps 高并发分布式事务的 终极方案，大厂架构师的 必备方案
左诗右码
|
25天前
|
NoSQL 安全 PHP
hyperf-wise-locksmith，一个高效的PHP分布式锁方案
`hyperf-wise-locksmith` 是 Hyperf 框架下的互斥锁库，支持文件锁、分布式锁、红锁及协程锁，有效防止分布式环境下的竞争条件。本文介绍了其安装、特性和应用场景，如在线支付系统的余额扣减，确保操作的原子性。
左诗右码
26 4
mikechen的互联网架构
|
1月前
|
NoSQL 算法 关系型数据库
分布式 ID 详解 ( 5大分布式 ID 生成方案 )
本文详解分布式全局唯一ID及其5种实现方案，关注【mikechen的互联网架构】，10年+BAT架构经验倾囊相授。
mikechen的互联网架构
106 4
分布式 ID 详解 ( 5大分布式 ID 生成方案 )
软件求生
|
6月前
|
消息中间件 数据挖掘 程序员
【建议收藏】高并发下的分布式事务：如何选择最优方案？
本文介绍了分布式事务的三种常见解决方案。在分布式系统中，事务处理变得复杂，需确保ACID特性。TCC（Try-Confirm-Cancel）方案适用于严格资金要求的场景，如银行转账，通过预留、确认和取消步骤确保一致性。可靠消息最终一致性方案适合一致性要求较低的场景，如电商积分处理，通过消息中间件实现最终一致性。最大努力通知方案则用于允许不一致的场景，如数据分析，通过重复通知尽可能达成一致性。选择合适的方案取决于具体应用场景。
软件求生
180 5
光明顶阳顶天
|
2月前
|
存储 缓存 NoSQL
分布式架构下 Session 共享的方案
【10月更文挑战第15天】在实际应用中，需要根据具体的业务需求、系统架构和性能要求等因素，选择合适的 Session 共享方案。同时，还需要不断地进行优化和调整，以确保系统的稳定性和可靠性。
光明顶阳顶天
60 1
yiui
|
2月前
|
SQL NoSQL 安全
分布式环境的分布式锁 - Redlock方案
【10月更文挑战第2天】Redlock方案是一种分布式锁实现，通过在多个独立的Redis实例上加锁来提高容错性和可靠性。客户端需从大多数节点成功加锁且总耗时小于锁的过期时间，才能视为加锁成功。然而，该方案受到分布式专家Martin的质疑，指出其在特定异常情况下（如网络延迟、进程暂停、时钟偏移）可能导致锁失效，影响系统的正确性。Martin建议采用fencing token方案，以确保分布式锁的正确性和安全性。
yiui
56 0
热爱技术的小郑
|
4月前
|
存储 NoSQL Java
一天五道Java面试题----第十一天（分布式架构下，Session共享有什么方案---------＞分布式事务解决方案）
这篇文章是关于Java面试中的分布式架构问题的笔记，包括分布式架构下的Session共享方案、RPC和RMI的理解、分布式ID生成方案、分布式锁解决方案以及分布式事务解决方案。
热爱技术的小郑
108 2
一天五道Java面试题----第十一天（分布式架构下，Session共享有什么方案---------＞分布式事务解决方案）

热门文章

最新文章

  • 1
    Kubernetes上的服务网格 Istio - 分布式追踪篇
  • 2
    WCF分布式安全开发实践(5):传输安全模式之Certificate身份验证:Transport_Certificate_WSHttpBinding
  • 3
    .NET简谈事务、分布式事务处理
  • 4
    服务器内部分布式图片取得
  • 5
    SpringCloud微服务实战——搭建企业级开发框架（四十二）：集成分布式任务调度平台XXL-JOB，实现定时任务功能
  • 6
    深度干货｜云原生分布式数据库 PolarDB-X 的技术演进
  • 7
    spring quartz分布式任务计划
  • 8
    分布式数据库新秀TIDB初探
  • 9
    分布式密码分析框架-Wisecracker
  • 10
    分布式监控系统Zabbix--完整安装记录 -添加web页面监控
  • 1
    新一代数据库技术：融合人工智能与分布式系统的未来前景
    356
  • 2
    【MongoDB 专栏】MongoDB 的分布式事务解决方案
    359
  • 3
    LabVIEW使用ModbusTCP协议构建分布式测量系统
    184
  • 4
    分布式搜索引擎ElasticSearch
    284
  • 5
    基于若依的ruoyi-nbcio流程管理系统修改代码生成的sql菜单id修改成递增id（谨慎修改，大并发分布式有弊端）
    114
  • 6
    一文说清楚IPFS分布式存储系统
    1514
  • 7
    LabVIEW中CPU和内存使用情况在NI分布式系统管理器中不可见
    83
  • 8
    构建高可用性Java应用：介绍分布式系统设计与开发
    82
  • 9
    Springboot-Jedis实现分布式锁
    112
  • 10
    分布式数据库有哪几种
    97

    • 相关课程

    更多
  • 开源PolarDB分布式版部署实操
  • Spring Boot+Vue.js+FastDFS实现分布式图片服务器
  • 基于Zookeeper、Dubbo构建互联网分布式基础架构
  • 分布式文件存储系统技术及实现
  • 分布式协调系统 Zookeeper 快速入门
  • 基于MongoDB构建实时日志分析平台

    • 相关电子书

    更多
  • 高并发分布式缓存Redis6.0
  • 基于社区的分布式 风险感知模型
  • 如何利用Redisson分布式化传统Web项目

    • 相关实验场景

    更多
  • 体验PolarDB-X透明分布式
  • 基于Hologres轻量实时的高性能OLAP分析
  • 基于Flink+Tair搭建实时监控大屏
  • 基于数据湖架构的网站访问行为分析
  • 利用Elasticsearch实现地理位置查询
  • 使用检索分析服务Elasticsearch版实现基础检索
    • 下一篇
    DataWorks售前咨询