环境:

1台pc (i5+8g内存+256固态)

vmware下装三个centos6.5。1个主节点,剩下两个作为数据节点和sql节点

转自:

http://database.51cto.com/art/201505/475376_all.htm


http://www.cnblogs.com/jackluo/archive/2013/01/19/2868152.html


MysqL Cluster 是MysqL 适合于分布式计算环境的高实用、可拓展、高性能、高冗余版本,其研发设计的初衷就是要满足许多行业里的最严酷应用要求,这些应用中经常要求数据库运行的可靠性要达到99.999%。MysqL Cluster允许在无共享的系统中部署“内存中”数据库集群,通过无共享体系结构,系统能够使用廉价的硬件,而且对软硬件无特殊要求。此外,由于每个组件有自己的内存和磁盘,不存在单点故障。

实际上,MysqL集群是把一个叫做NDB的内存集群存储引擎集成与标准的MysqL服务器集成。它包含一组计算机,每个都跑一个或者多个进程,这可能包括一个MysqL服务器,一个数据节点,一个管理服务器和一个专有的一个数据访问程序。

MysqL Cluster能够使用多种故障切换和负载平衡选项配置NDB存储引擎,但在Cluster 级别上的存储引擎上做这个最简单。以下为MysqL集群结构关系图,

MysqL从结构看,由3类节点(计算机或进程)组成,分别是:

管理节点:用于给整个集群其他节点提供配置、管理、仲裁等功能。理论上通过一台服务器提供服务就可以了。

数据节点:MysqL Cluster的核心,存储数据、日志,提供数据的各种管理服务。2个以上 时就能实现集群的高可用保证,DB节点增加时,集群的处理速度会变慢。

sql节点(API):用于访问MysqL Cluster数据,提供对外应用服务。增加 API 节点会提高整个集群的并发访问速度和整体的吞吐量,该节点 可以部署在Web应用服务器上,也可以部署在专用的服务器上,也开以和DB部署在 同一台服务器上。

NDB引擎

MysqL Cluster 使用了一个专用的基于内存的存储引擎——NDB引擎,这样做的好处是速度快, 没有磁盘I/O的瓶颈,但是由于是基于内存的,所以数据库的规模受系统总内存的限制, 如果运行NDB的MysqL服务器一定要内存够大,比如4G,8G,甚至16G。NDB引擎是分布式的,它可以配置在多台服务器上来实现数据的可靠性和扩展性,理论上 通过配置2台NDB的存储节点就能实现整个数据库集群的冗余性和解决单点故障问题。

缺陷

  • 基于内存,数据库的规模受集群总内存的大小限制
  • 基于内存,断电后数据可能会有数据丢失,这点还需要通过测试验证。
  • 多个节点通过网络实现通讯和数据同步、查询等操作,因此整体性受网络速度影响,因此速度也比较慢

2.2 优点

  • 多个节点之间可以分布在不同的地理位置,因此也是一个实现分布式数据库的方案。
  • 扩展性很好,增加节点即可实现数据库集群的扩展。
  • 冗余性很好,多个节点上都有完整的数据库数据,因此任何一个节点宕机都不会造成服务中断。

实现高可用性的成本比较低,不象传统的高可用方案一样需要共享的存储设备和专用的软件才能实现,NDB 只要有足够的内存就能实现。

本文将搭建一个最简化的MysqL Cluster系统,配置方法中的所有命令都是以root账户运行。这个MysqL Cluster包含一个管理结点、两个数据结点、两个sql结点,这五个结点会分别安装在五个虚拟机上,虚拟机的名称和IP如下所示:

节点对应的IP和端口管理节点(1个)192.168.1.252sql节点 (2个)192.168.1.252:3331192.168.1.52:3331数据节点 (2个)192.168.1.252192.168.1.52

管理节点 MysqL-mgm 192.168.202.139
数据节点 MysqL-ndbd1 192.168.202.140
数据节点 MysqL-ndbd2 192.168.202.141
sql节点 MysqL-ndbd1 192.168.202.140
sql节点 MysqL-ndbd2 192.168.202.141

一、公共配置

请在三个虚拟机上分别配置此处的配置项。

1. 安装虚拟机

虚拟机操作系统安装CentOS 6.4的x86_64版本,使用NAT网络,并且还要安装vmware-tools,具体安装方法此处不详述。

2. 拷贝MysqL cluster

下载以下版本的MysqL-Cluster:

http://cdn.MysqL.com/Downloads/MysqL-Cluster-7.3/MysqL-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz

下载得到的压缩包拷贝至虚拟机的/root/Downloads目录,然后在shell中运行以下命令:

 
 
  1. cd/root/Downloads
  2. tar-xvzfMysqL-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz
  3. mvMysqL-cluster-gpl-7.3.4-linux-glibc2.5-x86_64/usr/local/MysqL

3. 关闭安全策略

关闭iptables防火墙(或者打开防火墙的1186、3306端口),在Shell中运行以下命令:

  
  
  • chkconfig--level35iptablesoff
  • 关闭SELinux,在Shell中运行以下命令:

      
      
  • gedit/etc/selinux/config
  • 将config文件中的SELINUX项改为disabled,修改后的config文件的内容如下:

      
      
  • #ThisfilecontrolsthestateofSELinuxonthesystem.
  • #SELINUX=cantakeoneofthesethreevalues:
  • #enforcing-SELinuxsecuritypolicyisenforced.
  • #permissive-SELinuxprintswarningsinsteadofenforcing.
  • #disabled-NoSELinuxpolicyisloaded.
  • SELINUX=disabled
  • #SELINUXTYPE=cantakeoneofthesetwovalues:
  • #targeted-Targetedprocessesareprotected,
  • #mls-MultiLevelSecurityprotection.
  • SELINUXTYPE=targeted
  • 最后重启系统

    以上就是三个centos都要执行一遍的。


    二、配置管理结点(192.168.124.141)

    1. 配置config.ini配置文件

    在shell中运行以下命令:

      
      
  • mkdir/var/lib/MysqL-cluster
  • cd/var/lib/MysqL-cluster
  • geditconfig.ini
  • 配置文件config.ini内容如下:



    [ndbd default]
    #TotalSendBufferMemory=256M


    #This global parameter can be set only in the [ndbd default] section,and defines the number of replicas for each table stored in the cluster.
    #This parameter also specifies the size of node groups. A node group is a set of nodes all storing the same information.
    NoOfReplicas=2


    #指定存放数据的内存段大小 1M - 1024G
    #DataMemory=80M
    DataMemory=1600M


    #制定索引的内存段大小 18M 1M - 1T
    #IndexMemory=18M
    IndexMemory=600M


    [TCP DEFAULT]
    #数据节点的默认连接端口
    portnumber=2202
    #在向操作系统发出调用请求之前,TCP传输器采用缓冲来保存所有的消息。当该缓冲达到64KB时,将发送其内容,执行完一组消息循环后,也将发送这些内容。发送缓冲的默认值是256KB。
    SendBufferMemory=16M
    #指定了从TCP/IP套接字接收数据时所使用的缓冲大小。默认值为64KB.
    ReceiveBufferMemory=16M

    #配置管理节点
    [ndb_mgmd]
    NodeId=1
    hostname=192.168.202.139
    #管理节点数据(日志)目录
    datadir=/var/lib/MysqL-cluster

    #数据节点配置
    [ndbd]
    NodeId=2
    hostname=192.168.202.140
    datadir=/usr/local/MysqL/data
    # 出现错误时,该参数指定NDBD进程是退出还是自动重启.
    # 默认情况下,该特性是启用的(取值: Y/N或1/0)
    StopOnError=0
    [ndbd]
    NodeId=3
    hostname=192.168.202.141
    datadir=/usr/local/MysqL/data
    # 出现错误时,该参数指定NDBD进程是退出还是自动重启.
    # 默认情况下,该特性是启用的(取值: Y/N或1/0)
    StopOnError=0
    [ndbd]
    NodeId=6
    Hostname=192.168.202.142
    datadir=/usr/local/MysqL/data/
    StopOnError=0
    [ndbd]
    NodeId=7
    Hostname=192.168.202.143
    datadir=/usr/local/MysqL/data/
    StopOnError=0

    #sql节点配置
    [MysqLd]
    NodeId=4
    hostname=192.168.202.140

    [MysqLd]
    NodeId=5
    hostname=192.168.202.141




    [MysqLD]
    NodeId=8
    [MysqLD]
    NodeId=9

    2. 安装管理结点

    安装管理节点,不需要MysqLd二进制文件,只需要MysqL Cluster服务端程序(ndb_mgmd)和监听客户端程序(ndb_mgm)。在shell中运行以下命令:

      
      
  • cp/usr/local/MysqL/bin/ndb_mgm*/usr/local/bin
  • cd/usr/local/bin
  • chmod+xndb_mgm*
  • 三、配置数据结点(192.168.202.140、192.168.202.141)即(数据节点和sql节点)

    1. 添加MysqL组和用户

  • groupaddMysqL
  • useradd-gMysqLMysqL
  • 2. 配置my.cnf配置文件

  • gedit/etc/my.cnf
  • 配置文件my.cnf的内容如下:

    [MysqLd]
    basedir=/usr/local/MysqL 
     
    datadir=/usr/local/MysqL/data 
     
    #socket=/usr/local/MysqL/sock/MysqL.sock
    
    user=MysqL
    # disabling symbolic-links is recommended to prevent assorted security risks
    symbolic-links=0
    
    #数据节点(需放在[MysqLd])下,否则不能启动default_storage_engine=NDBCLUSTER
    ndbcluster   
    ndb-connectstring=192.168.202.139
    
    [MysqLd_safe]
    log-error=/var/log/MysqLd.log
    pid-file=/var/run/MysqLd/MysqLd.pid
    
    
    [MysqL_cluster] 
    ndb-connectstring=192.168.202.139
    #sql节点
    
    


    3. 创建系统数据库

    在shell中运行以下命令:

      
      
  • cd/usr/local/MysqL
  • mkdirsock
  • scripts/MysqL_install_db--user=MysqL--basedir=/usr/local/MysqL--datadir=/usr/local/MysqL/data
  • #或执行:
    scripts/MysqL_install_db --user=MysqL# 我记得我执行这个成功
  • 4. 设置数据目录

  • chown-Rroot. #注意有一点,表示当前目录
  • chown-RMysqL.MysqL/usr/local/MysqL/data
  • chown-RMysqL.MysqL/usr/local/MysqL/sock
  • chgrp-RMysqL.
  • 5. 配置MysqL服务

  • cpsupport-files/MysqL.server/etc/rc.d/init.d/
  • chmod +x /etc/rc.d/init.d/MysqLd
    chkconfig --add MysqLd
    service MysqLd start
  • 五、Cluster环境启动

    注意启动顺序:首先是管理节点,然后是数据节点,最后是sql节点。

    1. 启动管理结点

  • ndb_mgmd-f/var/lib/MysqL-cluster/config.ini
  • 还可以使用ndb_mgm来监听客户端,如下:

    同样在bin目录下执行:ndb_mgm

    2. 启动数据结点

    首次启动,则需要添加--initial参数,以便进行NDB节点的初始化工作。在以后的启动过程中,则是不能添加该参数的,否则ndbd程序会清除在之前建立的所有用于恢复的数据文件和日志文件。

      
      
  • /usr/local/MysqL/bin/ndbd--initial
  • 如果不是首次启动,则执行下面的命令。

     
     
      local/MysqL/bin/ndbd


    3. 启动sql结点

    若MysqL服务没有运行,则在shell中运行以下命令:

      
      
  • service MysqLd start
  • 4. 启动测试

    查看管理节点,启动成功

    六、集群测试

    1. 测试一

    现在我们在其中一个sql结点上进行相关数据库的创建,然后到另外一个sql结点上看看数据是否同步。

    在sql结点1(192.168.202.140)上执行:

      
      
  • shell>/usr/local/MysqL/bin/MysqL-uroot-p #初始时不用密码,直接回车
  • MysqL>showdatabases;
  • MysqL>createdatabaseaa;
  • MysqL>useaa;
  • MysqL>CREATETABLEctest2(iINT)ENGINE=NDB;//这里必须指定数据库表的引擎为NDB,否则同步失败
  • MysqL>INSERTINTOctest2()VALUES(1);
  • MysqL>SELECT*FROMctest2;
  • 然后在sql结点2上看数据是否同步过来了

    经过测试,在非master上创建数据,可以同步到master上

    查看表的引擎是不是NDB,>show create table 表名;

    2. 测试二

    关闭一个数据节点 ,在另外一个节点写输入,开启关闭的节点,看数据是否同步过来。

    首先把数据结点1重启,然后在结点2上添加数据

    在sql结点2(192.168.124.145)上操作如下:

      
      
  • MysqL>databasebb;
  • MysqL>usebb;
  • MysqL>TABLEctest3(iINT)ENGINE=NDB;
  • MysqL>useaa;
  • MysqL>VALUES(3333);
  • MysqL> 等数据结点1启动完毕,启动数据结点1的服务
      
      
  • #/usr/--initial#serviceMysqLdstart
  • 然后登录进去查看数据

    local
    /MysqL/bin/MysqL-uroot–p

    可以看到数据已经同步过来了,说明数据可以双向同步了。

    七、关闭集群

    1. 关闭管理节点和数据节点,只需要在管理节点(ClusterMgm--134)里执行:

    local/MysqL/bin/ndb_mgm-eshutdown
     
     
     
     
    管理节点关闭其中一个节点执行如下:# 节点id stop
    如 :2 stop

    显示

      
      
  • ConnectedtoManagementServerat:localhost:1186
  • 2NDBClusternode(s)haveshutdown.
  • disconnectingtoallowmanagementservertoshutdown.
  • 2. 然后关闭sql节点(135,136),分别在2个节点里运行:

    shell> /etc/init.d/MysqL.server stop

    Shutting down MysqL... SUCCESS!

    注意:要再次启动集群,就按照第五部分的启动步骤即可,不过这次启动数据节点的时候就不要加”-initial”参数了。

    若要修改config.ini且让他生效,则需要关闭集群。然后执行:

    /usr/local/MysqL/bin/ndb_mgmd -f /usr/local/MysqL/MysqL-cluster/config.ini --reload (该语句包含重启语句)

    centos6.5下搭建MySql集群的更多相关文章

    1. html5录音功能实战示例

      这篇文章主要介绍了html5录音功能实战示例的相关资料,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧

    2. 基于 HTML5 WebGL 实现的医疗物流系统

      物联网( IoT ),简单的理解就是物体之间通过互联网进行链接。这篇文章给大家介绍基于 HTML5 WebGL 实现的医疗物流系统,感兴趣的朋友跟随小编一起看看吧

    3. HTML5页面无缝闪开的问题及解决方案

      这篇文章主要介绍了HTML5页面无缝闪开方案,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下

    4. HTML5跳转小程序wx-open-launch-weapp的示例代码

      这篇文章主要介绍了HTML5跳转小程序wx-open-launch-weapp的相关知识,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下

    5. ios – 与Xcode Bots持续集成

      我想使用Xcode机器人进行持续集成.我已经安装了OSXMavericks和Server(版本3).我可以使用Xcode5.0.1创建机器人.在集成时,它正在成功地执行分析测试,但总是最终的集成结果是失败的.IntegrationFailed.Unexpectedinternalservererror.Seetheintegration’slogsformoredetails.`我没有从服务器错误

    6. ios – 使用NSURLSession.downloadTaskWithURL时的内存泄漏

      或者,繁荣,内存泄漏.Apple的NSURLSession类参考在管理边框中的会话部分中指定:IMPORTANT—Thesessionobjectkeepsastrongreferencetothedelegateuntilyourappexitsorexplicitlyinvalidatesthesession.Ifyoudonotinvalidatethesession,yourappleaksmemoryuntilitexits.嗯是的.你也可以考虑这两种方法:>flushWithCompletio

    7. 从iOS应用程序发送帖子到PHP脚本不工作…简单的解决方案就像

      我之前已经做了好几次了但是由于某些原因我无法通过这个帖子…我尝试了设置为_POST且没有的变量的PHP脚本……当它们未设置为发布时它工作精细.这是我的iOS代码:这里是PHP的一大块,POST变量不在正确的位置?我想这对于更有经验的开发人员来说是一个相当简单的答案,感谢您的帮助!解决方法$_POST是一个数组,而不是一个函数.您需要使用方括号来访问数组索引:

    8. xcode – osx上的config.log是什么?它在哪里?

      任何人都可以解释’configure’是什么和做什么,一般可以找到config.log文件?

    9. ios – Swift Physics:碰撞时的角度计算错误

      我有一个简单的SpriteKit应用程序,带有墙壁和球.两者都设置了SKPhysicsBody.当我向一个方向施加力时,我希望球在碰撞时以相同的角度在墙壁上反射,但方向相反.但有时我看到角度很奇怪.我使用了所有的physicsBody属性,但是无法修复它.有时第一次反射看起来很好,但是第三次或第六次反射,有时第一次反射是错误的角度.我从不同的帖子中读到,人们有点自我计算的“正确方向”.但我无法想象

    10. OpenStack对象存储――Swift

      Swift前身是RackspaceCloudFiles项目,随着Rackspace加入到OpenStack社区,于2010年7月贡献给OpenStack,作为该开源项目的一部分。Swift目前的最新版本是OpenStackEssex1.5.1。Swift特性在OpenStack官网中,列举了Swift的20多个特性,其中最引人关注的是以下几点。在OpenStack中还可以与镜像服务Glance结合,为其存储镜像文件。Auth认证服务目前已从Swift中剥离出来,使用OpenStack的认证服务Keysto

    随机推荐

    1. 在airgapped(离线)CentOS 6系统上安装yum软件包

      我有一个CentOS6系统,出于安全考虑,它已经被空气泄漏.它可能从未连接到互联网,如果有,它很长时间没有更新.我想将所有.rpm软件包放在一个驱动器上,这样它们就可以脱机安装而无需查询互联网.但是,我在测试VM上遇到的问题是,即使指定了本地路径,yum仍然会挂起并尝试从在线存储库进行更新.另外,有没有办法使用yum-utils/yumdownloader轻松获取该包的所有依赖项和所有依赖项?目前

    2. centos – 命名在日志旋转后停止记录到rsyslog

      CentOS6.2,绑定9.7.3,rsyslog4.6.2我最近设置了一个服务器,我注意到在日志轮换后,named已停止记录到/var/log/messages.我认为这很奇怪,因为所有日志记录都是通过rsyslog进行的,并且named不会直接写入日志文件.这更奇怪,因为我在更新区域文件后命名了HUPed,但它仍然没有记录.在我停止并重新启动命名后,记录恢复.这里发生了什么?

    3. centos – 显示错误的磁盘大小

      对于其中一个磁盘,Df-h在我的服务器上显示错误的空白区域:Cpanel表明它只有34GB免费,但还有更多.几分钟前,我删除了超过80GB的日志文件.所以,我确信它完全错了.fdisk-l/dev/sda2也显示错误:如果没有格式化,我该怎么做才能解决这个问题?并且打开文件描述符就是它需要使用才能做到这一点.所以…使用“lsof”并查找已删除的文件.重新启动写入日志文件的服务,你很可能会看到空间可用.

    4. 如何在centos 6.9上安装docker-ce 17?

      我目前正在尝试在centOS6.9服务器上安装docker-ce17,但是,当运行yuminstalldocker-ce时,我收到以下错误:如果我用跳过的标志运行它我仍然得到相同的消息,有没有人知道这方面的方法?

    5. centos – 闲置工作站的异常负载平均值

      我有一个新的工作站,具有不寻常的高负载平均值.机器规格是:>至强cpu>256GB的RAM>4x512GBSSD连接到LSI2108RAID控制器我从livecd安装了CentOS6.564位,配置了分区,网络,用户/组,并安装了一些软件,如开发工具和MATLAB.在启动几分钟后,工作站负载平均值的值介于0.5到0.9之间.但它没有做任何事情.因此我无法理解为什么负载平均值如此之高.你能帮我诊断一下这个问题吗?

    6. centos – Cryptsetup luks – 检查内核是否支持aes-xts-plain64密码

      我在CentOS5上使用cryptsetupluks加密加密了一堆硬盘.一切都很好,直到我将系统升级到CentOS6.现在我再也无法安装磁盘了.使用我的关键短语装载:我收到此错误:在/var/log/messages中:有关如何装载的任何想法?找到解决方案问题是驱动器使用大约512个字符长的交互式关键短语加密.出于某种原因,CentOS6中的新内核模块在由旧版本创建时无法正确读取512个字符的加密密钥.似乎只会影响内核或cryptsetup的不同版本,因为在同一系统上创建和打开时,512字符的密钥将起作用

    7. centos – 大量ssh登录尝试

      22个我今天登录CentOS盒找到以下内容这是过去3天内的11次登录尝试.WTF?请注意,这是我从我的提供商处获得的全新IP,该盒子是全新的.我还没有发布任何关于此框的内容.为什么我会进行如此大量的登录尝试?是某种IP/端口扫描?基本上有4名匪徒,其中2名来自中国,1名来自香港,1名来自Verizon.这只发生在SSH上.HTTP上没有问题.我应该将罪魁祸首子网路由吗?你们有什么建议?

    8. centos – kswap使用100%的CPU,即使有100GB的RAM也可用

      >Linux内核是否应该足够智能,只需从内存中清除旧缓存页而不是启动kswap?

    9. centos – Azure将VM从A2 / 3调整为DS2 v2

      我正在尝试调整前一段时间创建的几个AzureVM,从基本的A3和标准A3到标准的DS2v2.我似乎没有能力调整到这个大小的VM.必须从头开始重建服务器会有点痛苦.如果它有所不同我在VM中运行CentOS,每个都有一个带有应用程序和操作系统的磁盘.任何人都可以告诉我是否可以在不删除磁盘的情况下删除VM,创建新VM然后将磁盘附加到新VM?

    10. centos – 广泛使用RAM时服务器计算速度减慢

      我在非常具体的情况下遇到服务器速度下降的问题.事实是:>1)我使用计算应用WRF>2)我使用双XeonE5-2620v3和128GBRAM(NUMA架构–可能与问题有关!

    返回
    顶部