百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

SolrCloud集群伪分布式环境搭建 伪分布式hadoop集群

suiw9 2024-10-31 16:06 20 浏览 0 评论

一.SolrCloud简介 

  Apache Solr能够设置结合了容错能力和高可用性的Solr服务器集群。这些功能称为SolrCloud,其提供分布式索引和搜索功能,具有以下特点:

  1. 集群的集中配置。
  2. 自动负载均衡和查询故障转移。
  3. 集成ZooKeeper用于集群协调和配置。

  SolrCloud是灵活的分布式搜索和索引框架,无需主节点即可分配节点,分片和副本。 同时,Solr可以使用ZooKeeper来管理这些设置,具体取决于配置文件和设计模式。 Solr可以将文档发送到任何服务器节点,ZooKeeper会自动加载。

二.SolrCloud伪分布式集群搭建

  SolrCloud旨在提供高度可用的容错环境,以便在多个服务器之间分配索引和查询请求。这是一个系统,其中数据被组织切分成多段或分片,可以托管在多台计算机上,副本提供冗余,以实现可伸缩性和容错能力; ZooKeeper服务器则可以帮助管理整体结构,以便索引和搜索请求可以正确路由。

  1.bin/solr脚本使您轻松入门SolrCloud,它引导您完成以云模式启动Solr节点并添加集合的过程。 要开始使用,只需执行以下操作:

  ./bin/solr -e cloud

  注意:root用户操作时需要加-force

  这将启动一个交互式会话,以引导您完成使用嵌入式ZooKeeper设置简单SolrCloud集群的步骤。 该脚本首先询问您要在本地集群中运行多少个Solr节点,默认值为2。

 2.该脚本最多支持启动4个节点,但是建议在启动时使用默认值2。 这些节点将各自存在于单个计算机上,但是将使用不同的端口来模拟不同服务器上的操作。 接下来,脚本将提示您输入将每个Solr节点绑定到的端口。

3.为每个节点选择任何可用端口; 第一个节点的默认值是8983,第二个节点的默认值是7574。 该脚本将按顺序启动每个节点,并向您显示用于启动服务器的命令,例如:

一直Enter直到创建完两个solr,若报如下错误:

ERROR: Failed to start Solr using command: "/usr/local/soft/solrcloud/solr-7.7.2/bin/solr" start -cloud -p 8983 
-s "/usr/local/soft/solrcloud/solr-7.7.2/example/cloud/node1/solr" 
Exception : org.apache.commons.exec.ExecuteException: Process exited with an error: 1 (Exit value: 1)

4.则设置节点的最大用户进程数,执行如下命令查看当前节点的默认最大用户进程数:

5.修改配置文件/etc/security/limits.conf,添加如下配置:

6.重新加载配置文件,查看修改后的最大用户进程数:

7.重新执行solr脚本创建solrcloud,如下表示创建成功:

8.第一个节点还将启动绑定到端口8983的嵌入式ZooKeeper服务器。第一个节点的Solr主目录位于example/cloud/node1/solr中,如-s选项所示。

9.指定shard的个数,默认

10.启动集群中的所有节点后,脚本会提示您输入要创建的集合的名称:

11.只能设置它提示的名称,默认为gettingstarted

12.创建成功,前往登录

13.查看集群节点及shard分片布局:

14.执行查询

15.Solr还提供了一种使用以下命令对集合执行基本诊断的方法healthcheck命令:

 1 [root@master bin]# ./solr healthcheck -c gettingstarted
 2 {
 3   "collection":"gettingstarted",
 4   "status":"healthy",
 5   "numDocs":0,
 6   "numShards":2,
 7   "shards":[
 8     {
 9       "shard":"shard1",
10       "status":"healthy",
11       "replicas":[
12         {
13           "name":"core_node3",
14           "url":"http://192.168.136.7:8983/solr/gettingstarted_shard1_replica_n1/",
15           "numDocs":0,
16           "status":"active",
17           "uptime":"0 days, 0 hours, 42 minutes, 45 seconds",
18           "memory":"41.9 MB (%8.5) of 490.7 MB"},
19         {
20           "name":"core_node5",
21           "url":"http://192.168.136.7:7574/solr/gettingstarted_shard1_replica_n2/",
22           "numDocs":0,
23           "status":"active",
24           "uptime":"0 days, 0 hours, 42 minutes, 33 seconds",
25           "memory":"69.9 MB (%14.2) of 490.7 MB",
26           "leader":true}]},
27     {
28       "shard":"shard2",
29       "status":"healthy",
30       "replicas":[
31         {
32           "name":"core_node7",
33           "url":"http://192.168.136.7:8983/solr/gettingstarted_shard2_replica_n4/",
34           "numDocs":0,
35           "status":"active",
36           "uptime":"0 days, 0 hours, 42 minutes, 45 seconds",
37           "memory":"42.5 MB (%8.7) of 490.7 MB"},
38         {
39           "name":"core_node8",
40           "url":"http://192.168.136.7:7574/solr/gettingstarted_shard2_replica_n6/",
41           "numDocs":0,
42           "status":"active",
43           "uptime":"0 days, 0 hours, 42 minutes, 33 seconds",
44           "memory":"70.4 MB (%14.4) of 490.7 MB",
45           "leader":true
46         }]
47     }]
48 }

16.healthcheck命令收集有关集合中每个副本的基本信息,例如文档数,当前状态【活动,关闭等】和地址【副本在群集中的位置】。要在SolrCloud模式下停止Solr,可以使用bin/solr脚本并发出stop命令,如下所示:

  $ bin/solr stop -all

相关推荐

俄罗斯的 HTTPS 也要被废了?(俄罗斯网站关闭)

发布该推文的ScottHelme是一名黑客,SecurityHeaders和ReportUri的创始人、Pluralsight作者、BBC常驻黑客。他表示,CAs现在似乎正在停止为俄罗斯域名颁发...

如何强制所有流量使用 HTTPS一网上用户

如何强制所有流量使用HTTPS一网上用户使用.htaccess强制流量到https的最常见方法可能是使用.htaccess重定向请求。.htaccess是一个简单的文本文件,简称为“.h...

https和http的区别(https和http有何区别)

“HTTPS和HTTP都是数据传输的应用层协议,区别在于HTTPS比HTTP安全”。区别在哪里,我们接着往下看:...

快码住!带你十分钟搞懂HTTP与HTTPS协议及请求的区别

什么是协议?网络协议是计算机之间为了实现网络通信从而达成的一种“约定”或“规则”,正是因为这个“规则”的存在,不同厂商的生产设备、及不同操作系统组成的计算机之间,才可以实现通信。简单来说,计算机与网络...

简述HTTPS工作原理(简述https原理,以及与http的区别)

https是在http协议的基础上加了一层SSL(由网景公司开发),加密由ssl实现,它的目的是为用户提供对网站服务器的身份认证(需要CA),以至于保护交换数据的隐私和完整性,原理如图示。1、客户端发...

21、HTTPS 有几次握手和挥手?HTTPS 的原理什么是(高薪 常问)

HTTPS是3次握手和4次挥手,和HTTP是一样的。HTTPS的原理...

一次安全可靠的通信——HTTPS原理

为什么HTTPS协议就比HTTP安全呢?一次安全可靠的通信应该包含什么东西呢,这篇文章我会尝试讲清楚这些细节。Alice与Bob的通信...

为什么有的网站没有使用https(为什么有的网站点不开)

有的网站没有使用HTTPS的原因可能涉及多个方面,以下是.com、.top域名的一些见解:服务器性能限制:HTTPS使用公钥加密和私钥解密技术,这要求服务器具备足够的计算能力来处理加解密操作。如果服务...

HTTPS是什么?加密原理和证书。SSL/TLS握手过程

秘钥的产生过程非对称加密...

图解HTTPS「转」(图解http 完整版 彩色版 pdf)

我们都知道HTTPS能够加密信息,以免敏感信息被第三方获取。所以很多银行网站或电子邮箱等等安全级别较高的服务都会采用HTTPS协议。...

HTTP 和 HTTPS 有何不同?一文带你全面了解

随着互联网时代的高速发展,Web服务器和客户端之间的安全通信需求也越来越高。HTTP和HTTPS是两种广泛使用的Web通信协议。本文将介绍HTTP和HTTPS的区别,并探讨为什么HTTPS已成为We...

HTTP与HTTPS的区别,详细介绍(http与https有什么区别)

HTTP与HTTPS介绍超文本传输协议HTTP协议被用于在Web浏览器和网站服务器之间传递信息,HTTP协议以明文方式发送内容,不提供任何方式的数据加密,如果攻击者截取了Web浏览器和网站服务器之间的...

一文让你轻松掌握 HTTPS(https详解)

一文让你轻松掌握HTTPS原文作者:UC国际研发泽原写在最前:欢迎你来到“UC国际技术”公众号,我们将为大家提供与客户端、服务端、算法、测试、数据、前端等相关的高质量技术文章,不限于原创与翻译。...

如何在Spring Boot应用程序上启用HTTPS?

HTTPS是HTTP的安全版本,旨在提供传输层安全性(TLS)[安全套接字层(SSL)的后继产品],这是地址栏中的挂锁图标,用于在Web服务器和浏览器之间建立加密连接。HTTPS加密每个数据包以安全方...

一文彻底搞明白Http以及Https(http0)

早期以信息发布为主的Web1.0时代,HTTP已可以满足绝大部分需要。证书费用、服务器的计算资源都比较昂贵,作为HTTP安全扩展的HTTPS,通常只应用在登录、交易等少数环境中。但随着越来越多的重要...

取消回复欢迎 发表评论: