• 全部
  • 经验案例
  • 典型配置
  • 技术公告
  • FAQ
  • 漏洞说明
  • 全部
  • 全部
  • 大数据引擎
  • 知了引擎
产品线
搜索
取消
案例类型
发布者
是否解决
是否官方
时间
搜索引擎
匹配模式
高级搜索

IT大数据中配置安装节点成为ElasticSearch数据节点

2017-05-24 发表
  • 0关注
  • 0收藏 1076浏览
粉丝: 关注:

IT大数据成功部署后,安装节点在ElasticSearch中会被默认设置成为客户端节点。默认情况下,客户端节点不存储日志数据,其主要作用是响应web端的请求任务。因此,安装节点上的数据盘空间就没有充分利用,造成集群硬件资源的浪费。如果需要使用IT大数据中的安装节点存储数据,要在ES配置文件中修改对应配置,使IT大数据的安装节点承担数据存储任务。

在三个节点组成的从IT大数据集群中,使用ITOA-E0103.bin软件包成功部署后,通过ElasticSearch中的_plugin/head插件在web界面中查阅ElasticSearch集群状态,结果如图1所示

图1 修改配置前ElasticSearch集群状态

   从图1中可以看出,安装节点被标示为空心圆圈,该节点上没有数据分片。

为了使安装节点存储日志数据,需要修改该节点上的ElasticSearch配置文件,具体操作方法如下;

1.登录到安装节点后台,进入到ElasticSearch配置文件路径下

[root@itoanode01 ~]# cd /usr/local/lion/elasticsearch-2.4.1/config/
    [root@itoanode01 config]# ll
    total 12
    -rw-r--r-- 1 elasticsearch elasticsearch 3679 May 18 11:43 elasticsearch.yml
    -rw-r--r-- 1 elasticsearch elasticsearch 2571 Nov 12  2016 logging.yml
    drwxr-xr-x 2 elasticsearch elasticsearch 4096 Nov 12  2016 scripts

2.使用vi命令将配置文件elasticsearch.yml中的node.data选项为true(默认为false)

network.host: 172.168.1.166
    bootstrap.mlockall: true
    node.data: true
    node.master: false
    discovery.zen.minimum_master_nodes: 2 
    http.port: 9200
    discovery.zen.ping.unicast.hosts: ["172.168.1.166","172.168.1.167","172.168.1.168"]


    3.保存退出后,使用supervisorctl status查阅elasticsearch对应的进程号

[root@itoanode01 config]# supervisorctl status
collect_metric_d95a63a5-d700-4a8f-b760-e63cfebf361f     RUNNING   pid 1218, uptime 2 days, 0:33:57
parse_0efbdb43-30b1-40f2-b612-2661096428f3              RUNNING   pid 1215, uptime 2 days, 0:33:57
parse_78179600-48af-4ac1-9c5f-4466154cbb9f              RUNNING   pid 1217, uptime 2 days, 0:33:57
service_dist_1e74ed70-3b7c-11e7-a1a6-0cda411d3f65       RUNNING   pid 1214, uptime 2 days, 0:33:57
service_es_4431a64a-0649-446c-93e6-911cc01a2240         RUNNING   pid 1213, uptime 2 days, 0:33:57
service_logstash_65526373-12ad-4a15-b90c-ee6aafb4da13   RUNNING   pid 1216, uptime 2 days, 0:33:57
service_zk_824669ce-07ae-4d5b-9d4d-6eb188629638         RUNNING   pid 1212, uptime 2 days, 0:33:57
    4.使用supervisorctl restart重启elasticsearch服务进程

[root@itoanode01 config]# supervisorctl restart service_es_4431a64a-0649-446c-93e6-911cc01a2240
    service_es_4431a64a-0649-446c-93e6-911cc01a2240: stopped
    service_es_4431a64a-0649-446c-93e6-911cc01a2240: started

5.使用ElasticSearch中的_plugin/head/插件来检查配置结果,如图2所示

图2 修改配置后ElasticSearch集群状态

从图2中可以看出,此时安装节点上已经存在ElasticSearch的数据分片。所有的日志数据分布在集群中的三个节点上。



 

 

 

整个配置关键点在于以下两点:

1.将安装节点上的ElasticSearc配置文件中的node.data选项从默认的false修改为true。执行此操作的目的在于,若果ElasticSearch配置文件中将node.data设置为false,那么该节点就不会作为数据节点来存储ElasticSearc数据。修改为true表示该节点需要承担数据存储任务。

2.修改完ElasticSearch配置后,需要使用supervisorctl restart命令重启ElasticSearc服务进程,使配置文件生效。

若您有关于案例的建议,请反馈:

作者在2019-06-10对此案例进行了修订
0 个评论

该案例暂时没有网友评论

编辑评论

举报

×

侵犯我的权益 >
对根叔知了社区有害的内容 >
辱骂、歧视、挑衅等(不友善)

侵犯我的权益

×

泄露了我的隐私 >
侵犯了我企业的权益 >
抄袭了我的内容 >
诽谤我 >
辱骂、歧视、挑衅等(不友善)
骚扰我

泄露了我的隐私

×

您好,当您发现根叔知了上有泄漏您隐私的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到pub.zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您认为哪些内容泄露了您的隐私?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)

侵犯了我企业的权益

×

您好,当您发现根叔知了上有关于您企业的造谣与诽谤、商业侵权等内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到 pub.zhiliao@h3c.com 邮箱,我们会在审核后尽快给您答复。
  • 1. 您举报的内容是什么?(请在邮件中列出您举报的内容和链接地址)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
  • 3. 是哪家企业?(营业执照,单位登记证明等证件)
  • 4. 您与该企业的关系是?(您是企业法人或被授权人,需提供企业委托授权书)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

抄袭了我的内容

×

原文链接或出处

诽谤我

×

您好,当您发现根叔知了上有诽谤您的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到pub.zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您举报的内容以及侵犯了您什么权益?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

对根叔知了社区有害的内容

×

垃圾广告信息
色情、暴力、血腥等违反法律法规的内容
政治敏感
不规范转载 >
辱骂、歧视、挑衅等(不友善)
骚扰我
诱导投票

不规范转载

×

举报说明

提出建议

    +

亲~登录后才可以操作哦!

确定

亲~检测到您登陆的账号未在http://hclhub.h3c.com进行注册

注册后可访问此模块

跳转hclhub

你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作