• 全部
  • 经验案例
  • 典型配置
  • 技术公告
  • FAQ
  • 全部
  • 全部
产品线
搜索
取消
案例类型
发布者
是否解决
是否官方
时间
高级搜索

某局点CloudOS集群挂载IP共享存储,重启CloudOS节点时数据库丢失?

2018-06-28 发表
  • 0关注
  • 0收藏,2715浏览
粉丝:0人 关注:0人

组网及说明

场景描述

   在ADDC应用中,使用三台CloudOS做集群,挂载IP共享存储,CloudOS的数据库等目录存储在共享存储上,重启CloudOS中的任意一台,会出现数据库丢失情况

问题描述

数据库正常和丢失时的状态如下:

正常时数据库状态(15条记录):


postgres=# \l 
                                         List of databases 
    Name     |    Owner     | Encoding |   Collate   |    Ctype    |       Access privileges       
-------------+--------------+----------+-------------+-------------+------------------------------- 
 cinder      | cinderuser   | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/cinderuser               + 
             |              |          |             |             | cinderuser=CTc/cinderuser 
 cloudos_api | cloudos      | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/cloudos                  + 
             |              |          |             |             | cloudos=CTc/cloudos 
 cloudos_web | cloudos      | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/cloudos                  + 
             |              |          |             |             | cloudos=CTc/cloudos 
 glance      | glanceuser   | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/glanceuser               + 
             |              |          |             |             | glanceuser=CTc/glanceuser 
 heat        | heatuser     | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/heatuser                 + 
             |              |          |             |             | heatuser=CTc/heatuser 
 ironic      | ironicuser   | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/ironicuser               + 
             |              |          |             |             | irOnicuser=CTc/ironicuser 
 keystone    | keystoneuser | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/keystoneuser             + 
             |              |          |             |             | keystOneuser=CTc/keystoneuser 
 neutron     | neutronuser  | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/neutronuser              + 
             |              |          |             |             | neutrOnuser=CTc/neutronuser 
 nova        | novauser     | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/novauser                 + 
             |              |          |             |             | novauser=CTc/novauser 
 nova_api    | novauser     | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/novauser                 + 
             |              |          |             |             | novauser=CTc/novauser 
 postgres    | postgres     | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 sahara      | saharauser   | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/saharauser               + 
             |              |          |             |             | saharauser=CTc/saharauser 
 template0   | postgres     | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres                  + 
             |              |          |             |             | postgres=CTc/postgres 
 template1   | postgres     | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres                  + 
             |              |          |             |             | postgres=CTc/postgres 
 trove       | troveuser    | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =Tc/troveuser                + 
             |              |          |             |             | troveuser=CTc/troveuser 
(15 rows)  

postgres=# \q 


重启后数据库状态(共3条记录):

[root@H3CloudOS01 ~]# psql -h 127.0.0.1 -Upostgres 
psql (9.2.15, server 9.2.18) 
Type "help" for help.  

postgres=# \l 
                                  List of databases 
   Name    |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges   
-----------+----------+----------+-------------+-------------+----------------------- 
 postgres  | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 template0 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          + 
           |          |          |             |             | postgres=CTc/postgres 
 template1 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          + 
           |          |          |             |             | postgres=CTc/postgres 
(3 rows) 



过程分析

在CloudOS服务器重启后,通过在管理交换机ping CloudOS节点的存储网卡IP和管理网卡IP,发现存储网卡地址晚于管理网卡IP通时,数据库异常,在存储网比管理网先连通时,服务器状态正常。

   怀疑是STP收敛时影响网卡连通时间,把存储交换机与管理交换机上连接服务器的端口更改为边缘端口,多次在管理交换机与存储交换机上ping CloudOS服务器管理网IP与存储网IP联通时间差距很小,数据库正常。

解决方法

【规避措施】
1)关闭存储交换机STP,解决存储网up不及时问题
2)配置存储多路径
3)配置数据库定时备份,保证数据可靠性(手工备份在CloudOS部署界面就有按钮,自动备份需要找二线提供补丁)
4)尽量避免重启服务器或中断存储等人为操作

【版本优化】

 研发在后续版本优化,预计6月底发布。

0 个评论

该案例暂时没有网友评论

编辑评论

举报

×

侵犯我的权益 >
对根叔知了社区有害的内容 >
辱骂、歧视、挑衅等(不友善)

侵犯我的权益

×

泄露了我的隐私 >
侵犯了我企业的权益 >
抄袭了我的内容 >
诽谤我 >
辱骂、歧视、挑衅等(不友善)
骚扰我

泄露了我的隐私

×

您好,当您发现根叔知了上有泄漏您隐私的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您认为哪些内容泄露了您的隐私?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)

侵犯了我企业的权益

×

您好,当您发现根叔知了上有关于您企业的造谣与诽谤、商业侵权等内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到 zhiliao@h3c.com 邮箱,我们会在审核后尽快给您答复。
  • 1. 您举报的内容是什么?(请在邮件中列出您举报的内容和链接地址)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
  • 3. 是哪家企业?(营业执照,单位登记证明等证件)
  • 4. 您与该企业的关系是?(您是企业法人或被授权人,需提供企业委托授权书)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

抄袭了我的内容

×

原文链接或出处

诽谤我

×

您好,当您发现根叔知了上有诽谤您的内容时,您可以向根叔知了进行举报。 请您把以下内容通过邮件发送到zhiliao@h3c.com 邮箱,我们会尽快处理。
  • 1. 您举报的内容以及侵犯了您什么权益?(请在邮件中列出您举报的内容、链接地址,并给出简短的说明)
  • 2. 您是谁?(身份证明材料,可以是身份证或护照等证件)
我们认为知名企业应该坦然接受公众讨论,对于答案中不准确的部分,我们欢迎您以正式或非正式身份在根叔知了上进行澄清。

对根叔知了社区有害的内容

×

垃圾广告信息
色情、暴力、血腥等违反法律法规的内容
政治敏感
不规范转载 >
辱骂、歧视、挑衅等(不友善)
骚扰我
诱导投票

不规范转载

×

举报说明

提出建议

    +
<

亲~登录后才可以操作哦!

确定

你的邮箱还未认证,请认证邮箱或绑定手机后进行当前操作