百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

ElasticSearch系列(一):安装

nanshan 2025-01-13 16:32 11 浏览 0 评论

一.软件准备

可以先去官方网站(https://www.elastic.co/cn/downloads/past-releases)下载需要的版本7.17.9。同时,为了比较不同的安装方式,这里,我们选择【LINUX X86_64】与【RPM X86_64】分别进行下载,并在本文后续查看其是如何安装,并运行的。

elasticsearch-7.17.9-linux-x86_64.tar.gz

elasticsearch-7.17.9-x86_64.rpm

二.Tar包安装及其运行

1. 解压包到/home/下:

tar -xzf elasticsearch-7.17.9-linux-x86_64.tar.gz

  1. 创建用户组,及其新用户

因ElasticSearch默认不允许我们使用root用户启动,否则会报告如下错误:

java.lang.RuntimeException: can not run elasticsearch as root

故此,我们需要新建用户及其用户组,如下:

#创建es用户组

groupadd es

#创建es用户并加入到es用户组

useradd es -g es

#给elasticsearch-7.17.9文件夹赋予读写权限,如果服务启动遇到日志等文件权限不足的情况,需要再次执行以下命令进行赋予权限。

chmod -R 777 /home/elasticsearch-7.17.9

  1. ES_JAVA_HOME配置

因ElasticSearch从7.0开始默认安装了java运行环境,以便在没有安装java运行环境的机器上运行,安装包已经包含了一个相匹配的 JAVA 版本在里面。但是,需要配置ES_JAVA_HOME,否则会报告如下错误:

could not find java in bundled JDK at /home/elasticsearch-7.17.9/jdk/bin/java

vi /home/elasticsearch-7.17.9/bin/elasticsearch-env

增加配置如下:

ES_JAVA_HOME="$ES_HOME/jdk"

  1. elasticsearch.yml配置

编辑:vi /home/elasticsearch-7.17.9/config/elasticsearch.yml

在最后,追加如下配置:

xpack.ml.enabled: false # 注意“:”号存在空格!

否则直接启动,会报告如下错误:

uncaught exception in thread [main] org.elasticsearch.bootstrap.StartupException: ElasticsearchException[Failure running machine learning native code. This could be due to running on an unsupported OS or distribution, missing OS libraries, or a problem with the temp directory. To bypass this problem by running Elasticsearch without machine learning functionality set [xpack.ml.enabled: false].

  1. elasticsearch.yml配置

编辑:vi /home/elasticsearch-7.17.9/config/elasticsearch.yml

在最后,追加如下配置,暂时不做更新地图:

ingest.geoip.downloader.enabled: false # 注意“:”号存在空格!

否则再次启动,会报告如下错误:

not all primary shards of [.geoip_databases] index are active

  1. 运行

在完成上面章节的一系列配置后,切换到用户es下,从命令行运行 ElasticSearch

[root@localhost home]# su - es

执行如下命令,启动ElasticSearch

/home/elasticsearch-7.17.9/bin/elasticsearch

也可以作为一个守护进程在后台运行,如下:

/home/elasticsearch-7.17.9/bin/elasticsearch -d

  1. 验证

7.1 进程确认

执行如下命令:

ps aux | grep elasticsearch

如果看到如下信息输出,证明elasticsearch的确已经正常启动

7.2 Web确认

在等待一段时间后,执行如下命令:

curl "localhost:9200"

如果看到如下信息输出,证明elasticsearch的确已经正常启动

{

"name" : "localhost.localdomain",

"cluster_name" : "elasticsearch",

"cluster_uuid" : "jQCjqc34TNeB-wCX5D8Drg",

"version" : {

"number" : "7.17.9",

"build_flavor" : "default",

"build_type" : "tar",

"build_hash" : "ef48222227ee6b9e70e502f0f0daa52435ee634d",

"build_date" : "2023-01-31T05:34:43.305517834Z",

"build_snapshot" : false,

"lucene_version" : "8.11.1",

"minimum_wire_compatibility_version" : "6.8.0",

"minimum_index_compatibility_version" : "6.0.0-beta1"

},

"tagline" : "You Know, for Search"

}

7.3 浏览器中访问

通过http://192.168.246.133:9200/,访问失败,需要做如下修改

修改elasticsearch.yml配置

编辑:vi /home/elasticsearch-7.17.9/config/elasticsearch.yml

增加或者修改配置如下:

network.host: 0.0.0.0

因修改此配置,可能在启动ES的时候,遇到以下错误,需要逐一进行修改配置如下:

A). max file descriptors [4096] for elasticsearch process is too low, increase to at least [65535]

编辑 /etc/security/limits.conf

增加:

es soft nofile 65536

es hard nofile 65536

说明: soft nofile表示软限制,hard nofile表示硬限制。

ulimit -H -n

修改前,输出:4096

修改后,重新登录,输出:65536

B). max number of threads [3833] for user [es] is too low, increase to at least [4096]

编辑 /etc/security/limits.conf

增加:

es soft nproc 4096

es hard nproc 4096

ulimit -H -u

修改前,输出:3833

修改后,重新登录,输出:4096

C). max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]

Elasticsearch 默认使用 mmapfs 目录存储其索引。 默认的操作系统对 mmap 计数的限制可能太低,这可能会导致内存不足异常。

可以执行如下命令,临时调整:

sysctl -w vm.max_map_count=262144

或者编辑 /etc/sysctl.conf 做永久性调整:

增加或者修改如下配置:

vm.max_map_count=262144

执行:sysctl -p

配置之后验证是否生效,请执行如下命令:

sysctl vm.max_map_count

输出为262144

D). the default discovery settings are unsuitable for production use; at least one of [discovery.seed_hosts, discovery.seed_providers, cluster.initial_master_nodes] must be configured

修改elasticsearch.yml配置

编辑:vi /home/elasticsearch-7.17.9/config/elasticsearch.yml

增加或者修改配置如下:

cluster.initial_master_nodes: ["node-1"]

再重新启动ES后,便可以通过浏览器正常访问了。

8.安装文件目录布局:

默认情况下,所有文件和目录都包含在 $ES_HOME 中,解压缩归档时创建的目录。

类型

描述

默认位置

设置

home

Elasticsearch 主目录或 $ES_HOME

通过解压缩归档创建的目录


bin

二进制脚本包括用于启动节点的 elasticsearch 和用于安装插件的 elasticsearch-plugin

$ES_HOME/bin


config

配置文件,包括

elasticsearch.yml

$ES_HOME/config

ES_PATH_CONF

data

节点上分配的每个索引/分片的数据文件的位置,可以容纳多个位置。

$ES_HOME/data

path.data

logs

log 文件位置

$ES_HOME/logs

path.logs

plugins

插件文件位置,每个插件都将包含在一个子目录中。

$ES_HOME/plugins


repo

共享文件系统存储库位置,可以容纳多个位置,文件系统存储库可以放在此处指定的任何目录的任何子目录中。


path.repo

script

脚本文件的位置

$ES_HOME/scripts

path.scripts

三.RPM包安装

  1. RPM安装

执行如下命令,进行安装

rpm -ivh elasticsearch-7.17.9-x86_64.rpm

warning: elasticsearch-7.17.9-x86_64.rpm: Header V4 RSA/SHA512 Signature, key ID d88e42b4: NOKEY

Preparing... ################################# [100%]

Creating elasticsearch group... OK

Creating elasticsearch user... OK

Updating / installing...

1:elasticsearch-0:7.17.9-1 ################################# [100%]

### NOT starting on installation, please execute the following statements to configure elasticsearch service to start automatically using systemd

sudo systemctl daemon-reload

sudo systemctl enable elasticsearch.service

### You can start elasticsearch service by executing

sudo systemctl start elasticsearch.service

Created elasticsearch keystore in /etc/elasticsearch/elasticsearch.keystore

2.重载

执行如下命令,进行重载

sudo systemctl daemon-reload

3.开机启动

执行如下命令,使服务开机启动

sudo systemctl enable elasticsearch.service

[root@localhost installed_package]# sudo systemctl enable elasticsearch.service

Created symlink from /etc/systemd/system/multi-user.target.wants/elasticsearch.service to /usr/lib/systemd/system/elasticsearch.service.

  1. 启动服务

sudo systemctl start elasticsearch.service

服务无法启动,报告:

Job for elasticsearch.service failed because the control process exited with error code. See "systemctl status elasticsearch.service" and "journalctl -xe" for details.

这里,我们直接查看错误日志:

cat /var/log/elasticsearch/elasticsearch.log

看到有如下错误信息:

[2023-03-07T10:57:26,651][ERROR][o.e.b.Bootstrap ] [localhost.localdomain] Exception

org.elasticsearch.ElasticsearchException: Failure running machine learning native code. This could be due to running on an unsupported OS or distribution, missing OS libraries, or a problem with the temp directory. To bypass this problem by running Elasticsearch without machine learning functionality set [xpack.ml.enabled: false].

同前面章节处理相同:

编辑:vi /etc/elasticsearch/elasticsearch.yml

在最后,追加如下配置:

xpack.ml.enabled: false # 注意“:”号存在空格!

再次启动服务

sudo systemctl start elasticsearch.service # 正常

sudo systemctl restart elasticsearch.service # 正常

sudo systemctl stop elasticsearch.service # 正常

5.验证

5.1 进程确认

执行如下命令:

ps aux | grep elasticsearch

如果看到如下信息输出,证明elasticsearch的确已经正常启动

5.2 Web确认

在等待一段时间后,执行如下命令:

curl "localhost:9200"

如果看到如下信息输出,证明elasticsearch的确已经正常启动

{

"name" : "localhost.localdomain",

"cluster_name" : "elasticsearch",

"cluster_uuid" : "EdyzPpp0S1GwrPRYIKoYtQ",

"version" : {

"number" : "7.17.9",

"build_flavor" : "default",

"build_type" : "rpm",

"build_hash" : "ef48222227ee6b9e70e502f0f0daa52435ee634d",

"build_date" : "2023-01-31T05:34:43.305517834Z",

"build_snapshot" : false,

"lucene_version" : "8.11.1",

"minimum_wire_compatibility_version" : "6.8.0",

"minimum_index_compatibility_version" : "6.0.0-beta1"

},

"tagline" : "You Know, for Search"

}

注意: 与Tar包解压安装,可以看到build_type的值是不一样的。

5.3 浏览器中访问

通过http://192.168.246.134:9200/,同样也是访问失败,同时也一样需要做如下修改

修改elasticsearch.yml配置

编辑:vi /etc/elasticsearch/elasticsearch.yml

增加或者修改配置如下:

network.host: 0.0.0.0

但是与Tar包解压安装不同的是,在启动ES的时候,并不会同上面一样遇到那些错误,因为RPM安装,会帮助我们做一些参数设置。

下面,我们做一些简单的查看:

  1. vm.max_map_count检查

sysctl vm.max_map_count

  1. 查看配置文件/usr/lib/systemd/system/elasticsearch.service

可以看到有如下配置:

使用浏览器访问如下:

5.安装文件目录布局:

类型

描述

默认位置

设置

home

Elasticsearch 主目录或 $ES_HOME

/usr/share/elasticsearch


bin

二进制脚本包括用于启动节点的 elasticsearch 和用于安装插件的 elasticsearch-plugin

/usr/share/elasticsearch/bin


config

配置文件,包括

elasticsearch.yml

/etc/elasticsearch

ES_PATH_CONF

config

环境变量

/etc/sysconfig/elasticsearch


data

节点上分配的每个索引/分片的数据文件的位置,可以容纳多个位置。

/var/lib/elasticsearch

path.data

jdk

用于运行Elasticsearch的捆绑Java开发工具包,可以通过在

/etc/sysconfig/elasticsearch中设置环境变量ES_JAVA_HOME来覆盖

/usr/share/elasticsearch/jdk


logs

log 文件位置

/var/log/elasticsearch

path.logs

plugins

插件文件位置,每个插件都将包含在一个子目录中。

/usr/share/elasticsearch/plugins


repo

共享文件系统存储库位置,可以容纳多个位置,文件系统存储库可以放在此处指定的任何目录的任何子目录中。


path.repo

以上就是基本安装部署过程,及其可能遇到的错误的基本解决方法说明。

相关推荐

Linux 的磁盘系统,和你了解的Windows差别很大

我的C盘去哪了?一个系统,如果没有存储,那么也就不能称之为系统。存储性是一个完整系统的重要组成部分。例如AWS最开始的服务就是S3(用来存储数据的云服务),足以见得存储对于一个应用平台是多么的重要。...

一文读懂 Linux 硬盘挂载:从问题到解决方案

各位互联网大厂的后端开发伙伴们!在咱们日常工作中,操作Linux系统是常有的事儿吧。你们有没有遇到过这样的场景:新添加了一块硬盘,满心欢喜准备用来存储重要数据或者部署新的应用服务,却突然发现不知道...

硬盘分区(硬盘分区格式)

 磁盘(硬盘)分区,可以分C、D、E等分区,大家可能都会用,会根据自已的需要确定所需的空间,但分区是如何工作的呢,内容如下。Windows中有3类:MBR分区:MasterBootRecord,也...

parted命令工具分区介绍(particle命令)

linux系统磁盘分区通常可以使用fdisk和parted命令,当分区大小小于2TB的时候,两种皆可以使用,当分区大于2TB的话,就需要用parted分区。以下介绍parted命令相关使用,以sdb为...

Linux 服务器上查看磁盘类型的方法

方法1:使用lsblk命令lsblk输出说明:TYPE列显示设备类型,如disk(物理磁盘)、part(分区)、rom(只读存储)等。NAME列显示设备名称(如sda、nvme0n1)。TR...

Linux分区命令fdisk和parted使用介绍

摘要:一般情况下,Linux分区都是选择fdisk工具,要求硬盘格式为MBR格式,能支持的最大分区空间为2T。但是目前在实际生产环境中使用的磁盘空间越来越大,呈TB级别增长;而常用的fdisk这个工具...

linux 分区原理与名词解释(linux操作系统中的分区类型)

分区的意义将磁盘分成几份,每份挂在到文件系统的那个目录在linux里的文件系统Ext2:早期的格式,不支持日志功能Ext3:ext2改良版,增加了日志功能,是最基本且最常用的使用格式了Ext4:针对e...

linux 分区合并(linux合理分区)

查看虚拟机当前磁盘挂载情况fdisk-l选择磁盘fdisk/dev/sda查看磁盘分区情况p重新选择分区n选择主分区p保存w创建物理卷pvcreate/dev/sda3查看物理卷信息pvdi...

如何在 Linux 系统中永久禁用交换分区 ?

Linux操作系统中的交换分区或交换文件充当硬盘上的临时存储区域,当物理内存(RAM)满时,系统使用该存储区域。它用于交换较少使用的内存页,这样系统就不会因为运行应用程序而耗尽物理内存。随着技术的发...

Linux 如何知道硬盘已用多少空间、未用多少空间

刚出社会时,去了一家公司上班,老板为了省钱,买的服务器是低配的,硬盘大小只有40G,有一次网站突然不能访问了,排查半天才知道原来服务器的硬盘空间已用完,已无可用空间。第一步是查看硬盘的使用情况,第二步...

用Linux系统管理磁盘空间 就该这么来

要想充分有效的管理使用Linux系统中的存储空间,用户必须要做的就是双管齐下,一边扩充空间一边限制空间。不得不说的就是很多时候磁盘空间就像水资源,需节制水流。说到要如何实现限制空间就离不开使用LVM技...

Windows 11 磁盘怎么分区?(windows11磁盘怎么分区)

Windows11磁盘分区技术解析与操作指南:构建高效存储体系一、磁盘分区的技术本质与系统价值磁盘分区作为存储系统的基础架构,通过逻辑划分实现数据隔离与管理优化。Windows11采用NTF...

linux上创建多个文件分区,格式化为 ext2、ext3、ext4、XFS 文件

以下是在Linux系统上创建多个20GB文件分区并格式化为不同文件系统的分步指南:步骤1:创建基础文件(4个20GB文件)bash#创建4个20GB稀疏文件(实际占用空间随写入量增长)ddif=/...

救命的U盘低格哪家最强?(低格优盘)

周二时有位童鞋留言说U盘之前做过引导盘,现在格式化不了,用各种工具都不行,而且因为U盘厂商的关系,查不到U盘主控,无法量产恢复,特来求助。小编花了点时间特意弄坏一个U盘分区,终于试出方法了,特来分享一...

Linux 查看硬件磁盘存储大小和磁盘阵列(RAID)的组合方式

一、查看硬件磁盘存储大小查看所有磁盘信息:#lsblk该命令会列出所有磁盘(如/dev/sda、/dev/nvme0n1)及其分区和挂载点。查看磁盘总容量:fdisk-l#或parted-...

取消回复欢迎 发表评论: