下文來為各位整理一篇關于corosync+pacemaker的crmsh crm 實例的,希望這個例子可以幫助到各位,corosync和pacemaker實現高可用的難點就在crm命令,子命令多,參數多等,下面說一些常用的例子.

一,crm有兩種工作方式

1,批處理模式,就是在shell命令行中直接輸入命令

2,交互式模式(crm(live)#)進入到crmsh中交互執行.

二,命令詳解

1,一級子命令,代碼如下:

1. [root@node1 corosync]# crm   
2. crm(live)# help   
3. This is crm shell, a Pacemaker command line interface.   
4. Available commands:   
5.     cib              manage shadow CIBs //cib沙盒   
6.     resource         resources management //所有的資源都在這個子命令后定義   
7.     configure        CRM cluster configuration //編輯集群配置信息   
8.     node             nodes management //集群節點管理子命令   
9.     options          user preferences //用戶優先級   
10.     history          CRM cluster history //命令歷史記錄   
11.     site             Geo-cluster support   
12.     ra               resource agents information center //資源代理子命令（所有與資源代理相關的程都在此命令之下）   
13.     status           show cluster status //顯示當前集群的狀態信息   
14.     help,?           show help (help topics for list of topics)//查看當前區域可能的命令   
15.     end,cd,up        go back one level //返回第一級crm(live)   
16.     quit,bye,exit    exit the program //退出crm（live）交互模式   

2,resource資源狀態控制子命令,代碼如下:

1. crm(live)resource# help   
2. vailable commands:   
3.         status           show status of resources //顯示資源狀態信息   
4.         start            start a resource //啟動一個資源   
5.         stop             stop a resource //停止一個資源   
6.         restart          restart a resource //重啟一個資源   
7.         promote          promote a master-slave resource //提升一個主從資源   
8.         demote           demote a master-slave resource //降級一個主從資源   
9.         manage           put a resource into managed mode  //將一個資源加入到管理模式下   
10.         unmanage         put a resource into unmanaged mode  //從管理模式下去除一個資源   
11.         migrate          migrate a resource to another node //將資源遷移到另一個節點上   
12.         unmigrate        unmigrate a resource to another node   
13.         param            manage a parameter of a resource //管理資源的參數   
14.         secret           manage sensitive parameters //管理敏感參數   
15.         meta             manage a meta attribute //管理源屬性   
16.         utilization      manage a utilization attribute   
17.         failcount        manage failcounts //管理失效計數器   
18.         cleanup          cleanup resource status //清理資源狀態   
19.         refresh          refresh CIB from the LRM status //從LRM（LRM本地資源管理）更新CIB（集群信息庫），在   
20.         reprobe          probe for resources not started by the CRM //探測在CRM中沒有啟動的資源   
21.         trace            start RA tracing //啟用資源代理（RA）追蹤   
22.         untrace          stop RA tracing //禁用資源代理（RA）追蹤   
23.         help             show help (help topics for list of topics) //顯示幫助   
24.         end              go back one level //返回一級（crm(live)#）   
25.         quit             exit the program //退出交互式程序 

3,configure資源定義子命令,代碼如下:

1. crm(live)configure# help   
2. Available commands:   
3.         node             define a cluster node //定義一個集群節點   
4.         primitive        define a resource //定義資源   
5.         monitor          add monitor operation to a primitive //對一個資源添加監控選項（如超時時間，啟動失敗后的操作）   
6.         group            define a group //定義一個組類型（將多個資源整合在一起）   
7.         clone            define a clone //定義一個克隆類型（可以設置總的克隆數，每一個節點上可以運行幾個克隆）   
8.         ms               define a master-slave resource //定義一個主從類型（集群內的節點只能有一個運行主資源，其它從的做備用）   
9.         rsc_template     define a resource template //定義一個資源模板   
10.         location         a location preference //定義位置約束優先級（默認運行于那一個節點（如果位置約束的值相同，默認傾向性那一個高，就在那一個節點上運行））   
11.         colocation       colocate resources //排列約束資源（多個資源在一起的可能性）   
12.         order            order resources //資源的啟動的先后順序   
13.         rsc_ticket       resources ticket dependency   
14.         property         set a cluster property //設置集群屬性   
15.         rsc_defaults     set resource defaults //設置資源默認屬性（粘性）   
16.         fencing_topology node fencing order //隔離節點順序   
17.         role             define role access rights //定義角色的訪問權限   
18.         user             define user access rights //定義用用戶訪問權限   
19.         op_defaults      set resource operations defaults //設置資源默認選項   
20.         schema           set or display current CIB RNG schema   
21.         show             display CIB objects //顯示集群信息庫對   
22.         edit             edit CIB objects //編輯集群信息庫對象（vim模式下編輯）   
23.         filter           filter CIB objects //過濾CIB對象   
24.         delete           delete CIB objects //刪除CIB對象   
25.         default-timeouts set timeouts for operations to minimums from the meta-data   
26.         rename           rename a CIB object //重命名CIB對象   
27.         modgroup         modify group //改變資源組   
28.         refresh          refresh from CIB //重新讀取CIB信息   
29.         erase            erase the CIB //清除CIB信息   
30.         ptest            show cluster actions if changes were committed   
31.         rsctest          test resources as currently configured   
32.         cib              CIB shadow management   
33.         cibstatus        CIB status management and editing    //cib狀態管理和編輯   
34.         template         edit and import a configuration from a template   //編輯或導入配置模板   
35.         commit           commit the changes to the CIB //將更改后的信息提交寫入CIB   
36.         verify           verify the CIB with crm_verify //CIB語法驗證   
37.         upgrade          upgrade the CIB to version 1.0 //升級CIB到1.0   
38.         save             save the CIB to a file //將當前CIB導出到一個文件中（導出的文件存于切換crm 之前的目錄）   
39.         load             import the CIB from a file //從文件內容載入CIB   
40.         graph            generate a directed graph   
41.         xml              raw xml   
42.         help             show help (help topics for list of topics) //顯示幫助信息   
43.         end              go back one level //回到第一級(crm(live)#)   
44.         quit             exit the program  //退出crm交互模式   

4,node節點管理子命令,代碼如下:

1. crm(live)# node   
2. crm(live)node# help   
3. Node management and status commands.   
4. Available commands:   
5.     status           show nodes status as XML //以xml格式顯示節點狀態信息   
6.     show             show node //命令行格式顯示節點狀態信息   
7.     standby          put node into standby //模擬指定節點離線（standby在后面必須的FQDN）   
8.     online           set node online // 節點重新上線   
9.     maintenance      put node into maintenance mode  //將一個節點狀態改為maintenance   
10.     ready            put node into ready mode   //將一個節點狀態改為ready   
11.     fence            fence node //隔離節點   
12.     clearstate       Clear node state //清理節點狀態信息   
13.     delete           delete node //刪除 一個節點   
14.     attribute        manage attributes   
15.     utilization      manage utilization attributes   
16.     status-attr      manage status attributes   
17.     help             show help (help topics for list of topics)   
18.     end              go back one level  //回到上一次   
19.     quit             exit the program    //退出   

5,ra資源代理子命令,代碼如下:

1. crm(live)# ra   
2. crm(live)ra# help   
3. Available commands:   
4.         classes          list classes and providers //為資源代理分類   
5.         list             list RA for a class (and provider)//顯示一個類別中的提供的資源   
6.         meta             show meta data for a RA //顯示一個資源代理序的可用參數（如meta ocf:heartbeat:IPaddr2）   
7.         providers        show providers for a RA and a class   
8.         help             show help (help topics for list of topics)   
9.         end              go back one level   
10.         quit             exit the program   

三,實例

1,系統資源查看,代碼如下:

1. crm(live)ra# classes   //系統所使用的資源代理   
2. lsb   
3. ocf / heartbeat pacemaker   
4. service   
5. stonith 

2,默認系統資源列表,代碼如下:

1. crm(live)ra# list ocf   //列表默認系統資源   
2. CTDB               ClusterMon         Delay              Dummy              Filesystem         HealthCPU   
3. IPaddr             IPaddr2            IPsrcaddr          HealthCPU          HealthSMART        HealthSMART   
4. LVM                MailTo             Route              SendArp            Squid   
5. Stateful           SysInfo            SystemHealth       VirtualDomain      Xinetd   
6. apache             conntrackd         controld           db2                dhcpd   
7. ethmonitor         exportfs           iSCSILogicalUnit   mysql              named   
8. nfsnotify          nfsserver          pgsql              ping               pingd   
9. postfix            remote             rsyncd             symlink            tomcat   

3,查看外加的系統資源,代碼如下:

1. crm(live)ra# list lsb  //列表外加的系統資源   
2. NetworkManager     abrt-ccpp          abrt-oops          abrtd              acpid   
3. atd                auditd             autofs             blk-availability   certmonger   
4. corosync           corosync-notifyd   cpuspeed           crond              cups   
5. dnsmasq            firstboot          haldaemon          halt               hsqldb   
6. ip6tables          iptables           irqbalance         jexec              kdump   
7. killall            lvm2-lvmetad       lvm2-monitor       mdmonitor          messagebus   
8. mysqld             netconsole         netfs              network            nfs   
9. nfslock            nginx              nmb                ntpd               ntpdate   
10. oddjobd            openfire           pacemaker          php-fpm            portreserve   
11. postfix            psacct             quota_nld          rdisc              redis   
12. restorecond        rngd               rpcbind            rpcgssd            rpcidmapd   
13. rpcsvcgssd         rsyslog            sandbox            saslauthd          single   
14. slapd              smartd             smb                snmpd              snmptrapd   
15. spice-vdagentd     sshd               sssd               sysstat            udev-post   
16. vsftpd             wdaemon            winbind            wpa_supplicant     ypbind 

4,查看系統資源的參數,代碼如下:

1. crm(live)ra# meta ocf:heartbeat:IPaddr   //查看系統資源IPaddr的參數   
2. Manages virtual IPv4 and IPv6 addresses (Linux specific version) (ocf:heartbeat:IPaddr)   
3.    
4. This Linux-specific resource manages IP alias IP addresses.   
5. It can add an IP alias, or remove one.   
6. In addition, it can implement Cluster Alias IP functionality   
7. if invoked as a clone resource.   
8.    
9. If used as a clone, you should explicitly set clone-node-max >= 2,   
10. and/or clone-max < number of nodes. In case of node failure,   
11. clone instances need to be re-allocated on surviving nodes.   
12. This would not be possible if there is already an instance on those nodes,   
13. and clone-node-max=1 (which is the default).   
14.    
15. Parameters (*: required, []: default):   
16.    
17. ip* (string): IPv4 or IPv6 address   
18.     The IPv4 (dotted quad notation) or IPv6 address (colon hexadecimal notation)   
19.     example IPv4 "192.168.1.1".   
20.     example IPv6 "2001:db8:DC28:0:0:FC57:D4C8:1FFF".   
21. 。。。。。。。。。。。。。。。。。。。省略。。。。。。。。。。。。。。。。。。。。。。。。   

5,屬性修改,代碼如下:

1. crm(live)configure# property stonith-enabled=false //禁用stonith-enable   
2.    
3. crm(live)configure# property no-quorum-policy=ignore //忽略投票規則   

6,定義一資源所使用的命令,代碼如下:

1. /**  
2.  * primitive:定義一資源所使用的命令  
3.  * webip:為資源起一個名字  
4.  * ocf:heartbeat;IPaddr：所使用資源代理的類別，由誰提供的那一個代理程序  
5.  * op monitor 對webip做監控  
6.  * interval:間隔時間  
7.  * timeout：超時時間  
8.  * on-fail：失敗自起  
9.  */   
10. crm(live)configure# primitive webip ocf:heartbeat:IPaddr params ip=192.168.10.130 op monitor interval=30s timeout=20s on-fail=restart   
11.    
12. crm(live)configure# primitive nginx_res lsb:nginx //那些在/etc/init.d/*的腳本就是屬于lsb的   
13. params后面的參數，可以通過meta命令來查找，不同的系統資源參數是不一樣的。 

7,定義排列約束,代碼如下:

1. /**  
2.  * 定義排列約束  
3.  * colocation：排列約束命令  
4.  * nginx_web : 約束名  
5.  * inf:#(可能性，inf表示永久在一起，也可以是數值)  
6.  * webip nginx_res：#資源名稱  
7.  */   
8. crm(live)configure# colocation nginx_web inf: nginx_res webip   

8,定義資源啟動順序,代碼如下:

1. /**  
2.  * 定義資源啟動順序  
3.  * order : 順序約束的命令  
4.  * nginx_after_ip : 約束ID  
5.  * mandatory: #指定級別（此處有三種級別：mandatory：強制， Optional：可選，Serialize：序列化）  
6.  * webip nginx_res：#資源名稱,這里書寫的先后順序相當重要  
7.  */   
8. crm(live)configure# order nginx_after_ip mandatory: webip nginx_res   

9,定義節點權重,代碼如下:

1. /**  
2.  * 定義節點權重  
3.  * location：節點權重命令  
4.  * webip_and_webnfs_and_webserver：約束名稱  
5.  * webip 500: node1：webip這個資源的node1節點的權重是500  
6.  */   
7. crm(live)configure# location webip_and_webnfs_and_webserver webip 500: node1 

10,定義默認資源屬性,代碼如下:

1. /**  
2.  * 定義默認資源屬性  
3.  * rsc_defaults：默認資源  
4.  * 這樣定義代表集群中每一個資源的默認權重，只有當資源服務不在當前節點時，權重才會生效，比如，這里我定義了三個資源webip、webnfs、webserver，對每一個資源的權重為100，那么加在一起就變成了300,之前己經定義node1的位置約束的值為500，當node1宕機后，重新上線，這樣就切換到node1上了。 Vevb.com 
5.  */   
6. crm(live)configure# rsc_defaults resource-stickiness=100   

11,刪除資源或者節點,代碼如下:

1. crm(live)configure# delete nginx_res  //刪除一個資源，約束，排序，組等   
2. crm(live)node# delete node1  //刪除一個節   

12,資源其他,代碼如下:

1. crm(live)configure# verify //審核   
2. crm(live)configure# commit //提交   
3. crm(live)configure# show //顯示  

13,節點掛起和在線,代碼如下:

1. crm(live)node# standby node1   //節點掛起   
2. crm(live)node# online node1    //節點上線