百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

我和SOLR不得不说的故事 我和不得不说的秘密

suiw9 2024-10-31 16:07 15 浏览 0 评论

1安装部署

1.1单节点安装部署

本文使用SOLR 4.4.0版本作为研究对象,要求JDK 1.6,tomcat 6。

1.1.1下载

下载地址http://archive.apache.org/dist/lucene/solr/4.4.0/,分别下载linux版本和windows版本,区别只是打包的方式不一样。

1.1.2部署

1.1.2.1Windows环境部署

1.1.2.1.1Jetty

使用自带的jetty中间件部署solr。

1、解压文件

解压文件至j:\盘,solr目录是:J:\solr-4.4.0,文件目录如下。

contrib有一些功能模块是需要的jar包

dist是打包发布好的工程war包

docs是帮助文档

example是示例,里面有打包部署好的solr工程示例和servlet容器jetty。如果你没有tomcat可以直接使用Jetty服务器部署你的solr示例。

2、使用命令行,进入j:\solr\solr-4.4.0\example目录。运行start.jar文件。

# cd j:\solr\solr-4.4.0\example

# j:

# java –jar start.jar

3、登陆地址http://localhost:8983/solr/

1.1.2.1.2Tomcat

1、解压出solr-4.4.0

2、复制solr-4.4.0\example\webapps中的solr.war文件到tomcat安装目录中的webapps文件夹下

3、运行tomcat。(忽略怎么运行tomcat),tomcat会自动解压solr.war文件。

4、删除solr.war文件。(不然每次启动tomcat都会发布一次)

5、回到tomcat的webapps目录下,记事本打开solr\WEB-INF\web.xml文件。

加入如下代码:在<web-app />节点内的最后。

<env-entry>

<env-entry-name>solr/home</env-entry-name>

<env-entry-value>j:\solrhome</env-entry-value>

<env-entry-type>java.lang.String</env-entry-type>

</env-entry>

如上代码,需要在J盘新建一个文件夹:solrhome

6、回到解压的solr-4.4.0目录,打开文件夹:solr-4.4.0\example\solr,复制所有内容到J:\solrhome

7、打开文件夹:solr-4.4.0\example\lib\ext,复制所有jar包到tomcat的webapps\solr\WEB-INF\lib下。

8、运行web:http://localhost:8080/solr

注意solr 4.4只支持IE8以上浏览器版本。

1.1.2.2Linux环境部署

同windows环境部署方法

1.2集群安装部署

SolrCloud通过ZooKeeper集群来进行协调,使一个索引进行分片,各个分片可以分布在不同的物理节点上,多个物理分片组成一个完成的索引Collection。SolrCloud自动支持Solr Replication,可以同时对分片进行复制,冗余存储。

1.2.1准备工作

下载solr 4.4.0和zookeeper-3.3.6版本, 5台Redhat 6.1操作系统的虚拟机。其中三台安装搭建zookeeper集群,5台机器上都部署solr应用。

1.2.2配置主机

更改各个主机的hosts文件,在文件末尾添加:

192.168.1.201 slave1

192.168.1.202 slave2

192.168.1.203 slave3

192.168.1.204 slave4

192.168.1.205 slave5

重启系统。(如果和其他应用冲突,可以更改成其他的主机名称)

1.2.3配置zookeeper集群

以slave1主机为例:

1、下载zookeeper-3.3.6.tar文件,解压文件至/zookeeper文件目录

[root@slave1]# tar zxvf zookeeper-3.3.6.tar –C /zookeeper/

2、更改zoo.cfg配置文件

[root@slave1]# cd /zookeeper/conf

[root@slave1]# vi zoo.cfg

文件内容是:

tickTime=2000

initLimit=10

syncLimit=5

dataLogDir=/zookeeper/log/

dataDir=/zookeeper/data/

clientPort=2181

server.1=slave1:2888:3888

server.2=slave2:2888:3888

server.3=slave3:2888:3888

如果该目录中没有这个文件,则创建一个新的文件。注意每一个配置项的后面不要有空格,否则会报错。

3、配置myid文件

创建zoo.cfg文件中配置的dataLogDir和dataDir文件夹

[root@slave1]#mkdir /zookeeper/data/

[root@slave1]#mkdir /zookeeper/ log /

在dataDir指向的文件夹中创建myid文件,里面内容为一个数字,用来标识当前主机,conf/zoo.cfg文件中配置的server.X中X为什么数字,则myid文件中就输入这个数字,例如当前主机slave1,在zoo.cfg文件中对应的是server.1,所以myid文件中的值应该是1。

4、启动zookeeper

进入/zookeeper/bin文件夹,执行zkServer.sh文件

[root@slave1]#./zkServer.sh start

查看状态

[root@slave1]#./zkServer.sh status

查看启动日志

[root@slave1] #tail –f zookeeper.out

以slave1为案例配置其他两个节点。三个节点全部启动之后,zookeeper会根据选举算法选出一个leader,系统运行正常。

5、常见错误

#Cannot open channel to 2 at election address slave-02/192.168.0.178:3888 java.net.ConnectException: Connection refused

这是因为集群中的某一个节点没有启动完成,导致已经启动的节点无法连接该节点。这个错误在所有节点都启动成功之后消失。

#Cannot open channel to 1 at election address slave1/192.168.1.201:3888

java.net.NoRouteToHostException: No route to host

这是因为防火墙问题,关闭防火墙或开放相应端口

1.2.4配置solr集群

1、在5台机器上分别按照单节点安装部署方式部署solr(可以直接复制)。

2、创建配置文件目录(配置slave1)

在/solrhome下面建立一个core目录,比如叫collection

mkdir -p /solrhome/collection/conf

3、修改/solrhome/solr.xml(配置所有机器)

文件中的 hostPort 节点的端口号为tomcat的端口号

<int name="hostPort">${jetty.port:8080}</int>

4、设置slave1节点为leader节点,更改tomcat启动脚本文件/tomcat/bin/catalina.sh文件,添加以下内容:

JAVA_OPTS='-DzkHost=192.168.1.201:2181,192.168.1.202:2181,192.168.1.203:2181 -Dbootstrap_confdir=/solrhome/collection/conf -Dcollection.configName=solrCloudConf'

修改其他节点的tomcat启动脚本文件,添加以下内容:

JAVA_OPTS='-DzkHost=192.168.1.201:2181,192.168.1.202:2181,192.168.1.203:2181'

5、创建collection

在地址栏中输入

2应用配置

2.1配置Core Admin

1、在j:\solrhome目录下,新建一个mycore文件夹。

2、在解压的solr-4.4.0\example\multicore目录中,复制core0文件夹中所有文件到j:\solrhome\mycore中。

3、在j:\solrhome中新建一个文件夹:mydocs

4、复制解压的solr-4.4.0\example\exampledocs下的post.jar到E:\solrhome\mydocs中

5、复制解压的solr-4.4.0\example\multicore\exampledocs下的ipod_other.xml文件到j:\solrhome\mydocs中

6、添加Core

2.2分词

2.3索引管理

2.4检索建议

2.5分组统计

2.6高亮显示

2.7拼写检查

2.8自动聚类

2.9相似匹配

2.10拼音检索

相关推荐

俄罗斯的 HTTPS 也要被废了?(俄罗斯网站关闭)

发布该推文的ScottHelme是一名黑客,SecurityHeaders和ReportUri的创始人、Pluralsight作者、BBC常驻黑客。他表示,CAs现在似乎正在停止为俄罗斯域名颁发...

如何强制所有流量使用 HTTPS一网上用户

如何强制所有流量使用HTTPS一网上用户使用.htaccess强制流量到https的最常见方法可能是使用.htaccess重定向请求。.htaccess是一个简单的文本文件,简称为“.h...

https和http的区别(https和http有何区别)

“HTTPS和HTTP都是数据传输的应用层协议,区别在于HTTPS比HTTP安全”。区别在哪里,我们接着往下看:...

快码住!带你十分钟搞懂HTTP与HTTPS协议及请求的区别

什么是协议?网络协议是计算机之间为了实现网络通信从而达成的一种“约定”或“规则”,正是因为这个“规则”的存在,不同厂商的生产设备、及不同操作系统组成的计算机之间,才可以实现通信。简单来说,计算机与网络...

简述HTTPS工作原理(简述https原理,以及与http的区别)

https是在http协议的基础上加了一层SSL(由网景公司开发),加密由ssl实现,它的目的是为用户提供对网站服务器的身份认证(需要CA),以至于保护交换数据的隐私和完整性,原理如图示。1、客户端发...

21、HTTPS 有几次握手和挥手?HTTPS 的原理什么是(高薪 常问)

HTTPS是3次握手和4次挥手,和HTTP是一样的。HTTPS的原理...

一次安全可靠的通信——HTTPS原理

为什么HTTPS协议就比HTTP安全呢?一次安全可靠的通信应该包含什么东西呢,这篇文章我会尝试讲清楚这些细节。Alice与Bob的通信...

为什么有的网站没有使用https(为什么有的网站点不开)

有的网站没有使用HTTPS的原因可能涉及多个方面,以下是.com、.top域名的一些见解:服务器性能限制:HTTPS使用公钥加密和私钥解密技术,这要求服务器具备足够的计算能力来处理加解密操作。如果服务...

HTTPS是什么?加密原理和证书。SSL/TLS握手过程

秘钥的产生过程非对称加密...

图解HTTPS「转」(图解http 完整版 彩色版 pdf)

我们都知道HTTPS能够加密信息,以免敏感信息被第三方获取。所以很多银行网站或电子邮箱等等安全级别较高的服务都会采用HTTPS协议。...

HTTP 和 HTTPS 有何不同?一文带你全面了解

随着互联网时代的高速发展,Web服务器和客户端之间的安全通信需求也越来越高。HTTP和HTTPS是两种广泛使用的Web通信协议。本文将介绍HTTP和HTTPS的区别,并探讨为什么HTTPS已成为We...

HTTP与HTTPS的区别,详细介绍(http与https有什么区别)

HTTP与HTTPS介绍超文本传输协议HTTP协议被用于在Web浏览器和网站服务器之间传递信息,HTTP协议以明文方式发送内容,不提供任何方式的数据加密,如果攻击者截取了Web浏览器和网站服务器之间的...

一文让你轻松掌握 HTTPS(https详解)

一文让你轻松掌握HTTPS原文作者:UC国际研发泽原写在最前:欢迎你来到“UC国际技术”公众号,我们将为大家提供与客户端、服务端、算法、测试、数据、前端等相关的高质量技术文章,不限于原创与翻译。...

如何在Spring Boot应用程序上启用HTTPS?

HTTPS是HTTP的安全版本,旨在提供传输层安全性(TLS)[安全套接字层(SSL)的后继产品],这是地址栏中的挂锁图标,用于在Web服务器和浏览器之间建立加密连接。HTTPS加密每个数据包以安全方...

一文彻底搞明白Http以及Https(http0)

早期以信息发布为主的Web1.0时代,HTTP已可以满足绝大部分需要。证书费用、服务器的计算资源都比较昂贵,作为HTTP安全扩展的HTTPS,通常只应用在登录、交易等少数环境中。但随着越来越多的重要...

取消回复欢迎 发表评论: