Skip to main content
 首页 » 操作系统

Linux-安装ElasticSearch5.6.8

2022年09月17日170davidwang456

Linux-安装ElasticSearch5.6.8

下载ElasticSearch5.6.8

下载压缩包:

ElasticSearch的官方下载地址: https://www.elastic.co/cn/downloads/elasticsearch

往下翻

然后

然后选择需要下载的格式

注意下载linux版TAR 的

链接:https://pan.baidu.com/s/1WE-MNe4oamwHUuQ7BFj6Hg
提取码:1234

配置elasticsearch5.6.8和启动

我使用的是CentOS6.5 用的是宝塔终端工具来操作的

在linux中创建这些目录

cd /usr/local/
mkdir tool
cd tool
mkdir elasticsearch
cd elasticsearch

通过宝塔终端将elasticsearch-5.6.8.tar.gz上传/usr/local/tool/elasticsearch这个目录下面

然后使用tar -zxf elasticsearch-5.6.8.tar.gz 命令解压

进入到配置文件目录

cd /usr/local/tool/elasticsearch 进入到安装目录

cd elasticsearch-5.6.8/config 进入到配置目录

打开配置文件

vim elasticsearch.yml

在文件最后添加内容

bootstrap.memory_lock: false     
bootstrap.system_call_filter: false 
http.cors.enabled: true 
http.cors.allow-origin: "*" 
http.cors.allow-methods: "GET" 
network.host: 0.0.0.0 

修改JVM分配空间 否则因为虚拟机内存不够无法启动

cd /usr/local/tool/elasticsearch/elasticsearch-5.6.8/config/

vim jvm.options

-Xms2g                                   
-Xmx2g 
修改成为: 
-Xms340m 
-Xmx340m 

进入到elasticsearch-5.6.8的 bin 目录

cd /usr/local/tool/elasticsearch/elasticsearch-5.6.8/bin

关闭linux防火墙 否则外网是无法访问的

service iptables status 查看防火状态
service iptables stop 暂时关闭防火墙
chkconfig iptables off 永久关闭防火墙 重启后生效

注意:在linux环境下不支持root用户直接启动(理由是安全问题)

useradd es 添加用户
echo es | passwd --stdin es 给此用户设置密码
chown -R es:es /usr/local/tool/elasticsearch/* 设置权限

切换到es用户

su es

启动服务

./elasticsearch

可以看到 会报错

切换至root用户 su root 然后输入密码 , 解决方案如下:

在/etc/security/limits.conf 文件中加入这几行配置

* soft nofile 65536 
* hard nofile 131072 
* soft nproc 2048 
* hard nproc 4096 

* 不能少

修改vim /etc/sysctl.conf文件,增加配置vm.max_map_count=262144 然后 sysctl -p 保存

如果还有其他问题 自己上百度上找 应该都有解决办法的 以上问题都解决了 后 我们在 启动服务一次

可以发现没有任何报错 访问的地址 http://192.168.93.129:9200/

我们实际环境下是使用后台来启动的 加& 这样不会影响到 我们操作linux

./elasticsearch&

使用后会返回给我们一个 进程号 忘了也没关系 我们可以查询到

我们 可通过杀死后台进程来关闭它

ps -ef | grep elastic 查找 ES进程号

杀掉ES进程

kill -9 8157

安装elasticsearch-head图形化插件

head下载地址https://github.com/mobz/elasticsearch-head

链接:https://pan.baidu.com/s/1H6usdfNDFuS41uh_uVHZNQ
提取码:1234

下载下来的安装包elasticsearch-head-master.zip,上传到/usr/local/tool/elasticsearch目录

然后解压

cd /usr/local/tool/elasticsearch
su root
unzip elasticsearch-head-master.zip

下载nodejs(有了跳过) 使用npm -v 有版本号就代表有了

wget -c https://nodejs.org/dist/v12.16.2/node-v12.16.2-linux-x64.tar.xz

下载完成后,直接使用如下命令解压:

tar -xvf node-v12.16.2-linux-x64.tar.xz

配置环境变量:

vim /etc/profile ,在文件内最后添加如下内容,

export NODE_HOME=/usr/local/tool/elasticsearch/node-v12.16.2-linux-x64 
export PATH=$PATH:$NODE_HOME/bin 
export NODE_PATH=$NODE_HOME/lib/node_modules 
 

让配置生效

source /etc/profile

然后node -v会显示版本号,表示node安装成功;

可能会有异常情况:(没问题跳过)
node: /usr/lib64/libstdc++.so.6: version `GLIBCXX_3.4.14’ not found (required by node)

这是由于linux gcc版本太低导致,需要升级,比如我是centerOs6.5,安装nodejs v12就会有问题,需要升级gcc:

下载libstdc.so_.6.0.26

链接:https://pan.baidu.com/s/1wPNBBIPpPEy-SoF-kXP_VA
提取码:1234

通过宝塔终端工具将压缩包放入随便一个目录 比如 /root里

解压

cd /root

unzip libstdc.so_.6.0.26.zip

放到对应目录下面

mv ./libstdc++.so.6.0.26 /usr/lib64/

然后 删除以前的libstdc++.so.6

rm libstdc++.so.6 这里会提示是否删除符号链接 直接 y 就行

ln /usr/lib64/libstdc++.so.6.0.26 /usr/lib64/libstdc++.so.6

然后 strings /usr/lib64/libstdc++.so.6 | grep GLIBC

然后我们在node -v会显示版本号,表示node安装成功;

我们在使用npm -v 会显示版本号表示 环境没问题

进入head根目录安装grunt

cd /usr/local/tool/elasticsearch/elasticsearch-head-master

npm install -g grunt-cli

检测是否安装成功,如果执行命令后出现版本号就表明成功

grunt -version

修改head配置文件Gruntfile.js

在head的配置文件Gruntfile.js中添加host正则匹配项:

cd /usr/local/tool/elasticsearch/elasticsearch-head-master

vim Gruntfile.js

connect: {
    
        server: {
    
                  options: {
    
                          port: 9100, 
                          base: '.', 
                          keepalive: true, 
                          host: '*'                添加这一项 
                  } 
          } 
  }      

然后在head目录下执行:

cd /usr/local/tool/elasticsearch/elasticsearch-head-master

安装npm 服务

npm install

启动插件

grunt server

访问 http://你linux的ip:9100/ 比如我的 http://192.168.93.129:9100/

进入显示如下:

我们也可以使用后台启动插件 添加& 的方式 来后台托管 不影响linux其他操作

grunt server&

IK 分词器

介绍

为什么要在elasticsearch中要使用ik这样的中文分词呢,那是因为es提供的分词是英文分词,对于中文的分词就做的非常不好了,因此我们需要一个中文分词器来用于搜索和使用。

支持中文分词的分词器有很多,word分词器、庖丁解牛、盘古

分词、Ansj分词等,但我们常用的还是下面要介绍的IK分词器。

IKAnalyzer是一个开源的,基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始,

IKAnalyzer已经推出 了3个大版本。最初,它是以开源项目Lucene为应用主体的,结合词典分词和文法分析算法的

中文分词组件。新版本的IKAnalyzer3.0则发展为 面向Java的公用分词组件,独立于Lucene项目,同时提供了对

Lucene的默认优化实现。

IK分词器特性如下:

1)采用了特有的“正向迭代最细粒度切分算法“,具有60万字/秒的高速处理能力。

2)采用了多子处理器分析模 式,支持:英文字母(IP地址、Email、URL)、数字(日期,常用中文数量词,罗马数字,科学计数法),中文 词汇(姓名、地名处理)等分词处理。

3)对中英联合支持不是很好,在这方面的处理比较麻烦.需再做一次查询,同时是支持个人词条的优化的词典存储,更小的内存占用。 4)支持用户词典扩展定义。 5)针对Lucene全文检索优 化的查询分析器IKQueryParser;采用歧义分析算法优化查询关键字的搜索排列组合,能极大的提高Lucene检索的 命中率。

倒排索引

​ 倒排表以字或词为关键字进行索引,表中关键字所对应的记录表项记录了出现这个字或词的所有文档,一个表项就是一个字表段,它记录该文档的ID和字符在该文档中出现的位置情况。
​ 由于每个字或词对应的文档数量在动态变化,所以倒排表的建立和维护都较为复杂,但是在查询的时候由于可以一次得到查询关键字所对应的所有文档,所以效率高于正排表。在全文检索中,检索的快速响应是一个最为关键的性能,而索引建立由于在后台进行,尽管效率相对低一些,但不会影响整个搜索引擎的效率。

下载和配置

下载地址https://github.com/medcl/elasticsearch-analysis-ik/releases

要下载你 elasticsearch 对应 的 iK 否则 你的elasticsearch会不兼容 导致服务启动失败

链接:https://pan.baidu.com/s/1amfF28yVHy7RjrCgI-6boA
提取码:1234

我们先在到cd /usr/local/tool/elasticsearch/elasticsearch-5.6.8/plugins下 创建一个名字为analysis-ik的文件夹 (必须的)

mkdir -p  elasticsearch-5.6.8/plugins/analysis-ik 
cd  analysis-ik 

然后将elasticsearch-analysis-ik-5.6.8 放入linux 的 elasticsearch-5.6.8/plugins/目录下
在这里插入图片描述

unzip -o  elasticsearch-analysis-ik-5.6.8.zip 

解压之后elasticsearch-analysis-ik-5.6.8改名为analysis-ik,然后删除elasticsearch-analysis-ik-5.6.8.zip压缩包和elasticsearch

然后重启 elasticsearch-5.6.8 (ps -ef | grep elastic , kill -9 id ./elasticsearch&) 即可自动加载IK分词器 ,注意使用es用户启动

在这里插入图片描述
当我们看到的信息那么就表示成功了

IK分词器测试

IK提供了两个分词算法ik_smart 和 ik_max_word

其中 ik_smart 为最少切分,ik_max_word为最细粒度划分

我们分别来试一下 :

1)最小切分:在浏览器地址栏输入地址

http://127.0.0.1:9200/_analyze?analyzer=ik_smart&pretty=true&text=我是程序员

输出的结果为:

在这里插入图片描述

2)最细切分:在浏览器地址栏输入地址

http://127.0.0.1:9200/_analyze?analyzer=ik_max_word&pretty=true&text=我是程序员

在这里插入图片描述

从上面我们就可以看出来区别了吧, 如果内容较为庞大的情况下不建议使用最细切分那样会导致速度非常慢既然了解了 IK 那么我们就将IK 映射到Mapping中吧

修改索引映射mapping

重建索引

删除原有blog2索引

使用DELETE请求 http://localhost:9200/blog2

创建blog2索引,此时分词器使用ik_max_word

使用PUT请求 http://localhost:9200/blog2

Body

{
    
    "mappings":{
    
        "article":{
    
            "properties":{
    
                "id":{
    
                    "type":"long", 
                    "store":true, 
                    "index":false 
                }, 
                "title":{
    
                    "type":"text", 
                    "store":true, 
                    "index":true, 
                    "analyzer":"ik_max_word" 
                }, 
                "content":{
    
                    "type":"text", 
                    "store":true, 
                    "index":true, 
                    "analyzer":"ik_max_word" 
                } 
            } 
        } 
    } 
} 

创建索引blog2 和表article 以及表结构

elasticsearch-head里 查看索引信息

使用POST请求 http://localhost:9200/blog2/article/1

向blog2索引内article表中添加 文档id为1 的 一行数据

Body

{
    
    "id":1, 
    "title":"ElasticSearch是一个基于Lucene的搜索服务器", 
    "content":"它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java 开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时 搜索,稳定,可靠,快速,安装使用方便。" 
} 

我们使用 最细切分 来看看 切分后的结果 然后在进行 query_string查询 和 term查询

http://127.0.0.1:9200/_analyze?analyzer=ik_max_word&pretty=true&text=ElasticSearch是一个基于Lucene的搜索服务器

	 
token	"elasticsearch" 
 
token	"是" 
 
token	"一个" 
 
token	"一" 
 
token	"个" 
 
token	"基于" 
	 
token	"lucene" 
	 
token	"的" 
 
token	"搜索" 
 
token	"服务器" 
 
token	"服务" 
 
token	"器" 
 

上面就是ik 分词集

我们使用query_String查询 看看有什么变化

发送POST请求 http://localhost:9200/blog2/article/_search

Body

{
    
    "query":{
    
        "query_string":{
    
            "default_field":"title", 
            "query":"搜索服务器" 
        } 
    } 
} 

结果 是能查询到的 默认采用的是 or 匹配 在ik分词集里 是能匹配到的

然后我们在试试 将请求体搜索服务器字符串修改为 钢索,再次查询 发现并没有查询到

因为 在ik分词集里没有 钢 或者 索 的词

我们使用 term 查询 看看有什么变化

发送POST请求 http://localhost:9200/blog2/article/_search

Body

{
    
    "query":{
    
        "term":{
    
            "title":"搜索" 
        } 
    } 
} 

结果发现 是能查询到的 因为在ik分词集里是能找到搜索 这个词

看有什么变化**

发送POST请求 http://localhost:9200/blog2/article/_search

Body

{
    
    "query":{
    
        "query_string":{
    
            "default_field":"title", 
            "query":"搜索服务器" 
        } 
    } 
} 

结果 是能查询到的 默认采用的是 or 匹配 在ik分词集里 是能匹配到的

然后我们在试试 将请求体搜索服务器字符串修改为 钢索,再次查询 发现并没有查询到

因为 在ik分词集里没有 钢 或者 索 的词

我们使用 term 查询 看看有什么变化

发送POST请求 http://localhost:9200/blog2/article/_search

Body

{
    
    "query":{
    
        "term":{
    
            "title":"搜索" 
        } 
    } 
} 

结果发现 是能查询到的 因为在ik分词集里是能找到搜索 这个词

问题解决

在这里插入图片描述
解决办法: 先用:npm -g install phantomjs-prebuilt@2.1.16 --ignore-script 继续 npm install 然后还出现了 一样的情况,不要管继续 npm run start 运行起来就是了


本文参考链接:https://huanmin.blog.csdn.net/article/details/120247997