上海地税局EMC存储实施配置报告.docx

上海地税局EMC存储实施配置报告.docx

《上海地税局EMC存储实施配置报告.docx》由会员分享，可在线阅读，更多相关《上海地税局EMC存储实施配置报告.docx（13页珍藏版）》请在冰豆网上搜索。

上海地税局EMC存储实施配置报告

上海地税局

EMCCX4－120存储系统

《实施配置报告》

提供方：

青鸟软件股份有限公司

日期：

2010/8/24

接收方：

上海地方税局

日期：

2010/8/24

青鸟软件股份有限公司

2010年8月24日

版本记录

版本编号

版本日期

修改者

说明

1.0

2010/8/24

商文

实施配置报告1.0版

修订记录

版本编号

版本日期

修改者

说明

1.1

版权说明

本文件中出现的任何文字叙述、文档格式、插图、照片、方法、过程等内容，除另有特别注明，版权均属美国EMC公司所有，受到有关产权及版权法保护。

任何个人、机构未经美国EMC公司的书面授权许可，不得复制、引用或传播本文件的任何片断，无论通过电子形式或非电子形式。

目录

版本记录2

修订记录2

版权说明2

1概述4

1.1目标及任务4

1.2主机要求4

2系统配置4

2.1系统连接图4

2.2光纤交换机基本配置信息5

2.3交换机端口分配6

2.4交换机ZONE划分6

2.5CX4-120LUN配置8

3EMC软件安装与配置8

3.1POWERPATH安装与配置8

4维护相关9

4.1主机相关输出信息记录9

4.2EMCCLARIIONCX系列开关机注意事项及详细步骤9

基本顺序：

9

开机前注意事项：

9

开机步骤：

10

关机前注意事项：

10

磁盘阵列关机步骤：

11

1概述

1.1目标及任务

◆CX4-120安装上架；

◆配置SAN交换机

◆思科刀片服务器连接到CX4-120存储系统

◆实现BootformSAN

◆配合VMware和Hyper-V实施虚拟化

1.2主机要求

Hostname

SystemType

ModelType

OperatingSystem

OperatingSystemVersion

HBA

（Qty）

MakeModel

Hyper-V-Server1

Window

思科刀片

2008

Enterprise

2

Cisco

Hyper-V-Server2

Window

思科刀片

2008

Enterprise

2

Cisco

Hyper-V-Server3

Window

思科刀片

2008

Enterprise

2

Cisco

Hyper-V-Server4

Window

思科刀片

2008

Enterprise

2

Cisco

Hyper-V-Server5

Window

思科刀片

2008

Enterprise

2

Cisco

Hyper-V-Server6

Window

思科刀片

2008

Enterprise

2

Cisco

Hyper-V-Server7

Window

思科刀片

2008

Enterprise

2

Cisco

Hyper-V-Server8

Window

思科刀片

2008

Enterprise

2

Cisco

VMware-Server1

VMware

思科刀片

ESX

4.0

2

Cisco

VMware-Server2

VMware

思科刀片

ESX

4.0

2

Cisco

VMware-Server3

VMware

思科刀片

ESX

4.0

2

Cisco

VMware-Server4

VMware

思科刀片

ESX

4.0

2

Cisco

VMware-Server5

VMware

思科刀片

ESX

4.0

2

Cisco

VMware-Server6

VMware

思科刀片

ESX

4.0

2

Cisco

VMware-Server7

VMware

思科刀片

ESX

4.0

2

Cisco

VMware-Server8

VMware

思科刀片

ESX

4.0

2

Cisco

2系统配置

2.1系统连接图

该系统由三个部分组成，EMC存储、光纤交换机、CiscoUCS刀片服务器构成。

一台EMC存储CX4-120配置为双控制器、20块15000转450G（裸容量为9TB）；两台光纤交换机思科的MDS9124、24口4G端口；一套思科刀片服务器双控、配置2个刀笼（每个刀笼8个刀片，共16片刀）；

该系统为全冗余结构，存储CX4-120双控上连到2台MDS9124光纤交换机；思科刀片双控上连到2台MDS9124光纤交换机。

到存储或刀片服务器任何一个控制器损坏，都可以保证系统正常。

如下图所示：

上海地税局SAN网络连接图

2.2光纤交换机基本配置信息

Model

MDS9124

MDS9124

SwitchName

MDS-9124-Top

MDS-9124-Bottom

administrator

admin

Admin

Password

Cisco@123

Cisco@123

IPAddress

78.20.38.142

78.20.38.143

Netmask

255.255.255.0

255.255.255.0

Gateway

78.20.38.254

78.20.38.254

KernelVersion

4.1（3a）

4.1（3a）

FabricOS

4.1（3a）

4.1（3a）

domainid

1

1

ZoneConfig

Top-cfg-v100

Bottom-cfg-v100

2.3交换机端口分配

交换机mds-9124-top端口分配

Port

MDS-9124-Top

WWN（PortName+NodeName）

1

CX4120SPB3

50:

06:

01:

68:

44:

60:

12:

8950:

06:

01:

60:

c4:

60:

12:

89

2

CiscoUCS6124XPFC1/1

20:

41:

00:

05:

73:

a1:

6c:

8020:

64:

00:

05:

73:

a1:

6c:

81

3

CX4-120-SPA4

50:

06:

01:

60:

44:

60:

12:

8950:

06:

01:

60:

c4:

60:

12:

89

交换机mds-9124-bottom端口分配

Port

MDS-9124-Bottom

WWN

1

CX4120SPB4

50:

06:

01:

69:

44:

60:

12:

8950:

06:

01:

60:

c4:

60:

12:

89

2

CiscoUCS6120XPFC1/1

20:

41:

00:

05:

73:

a1:

73:

4020:

64:

00:

05:

73:

a1:

73:

41

3

CX4120SPA3

50:

06:

01:

61:

44:

60:

12:

8950:

06:

01:

60:

c4:

60:

12:

89

2.4交换机ZONE划分

1、交换机mds-9124-buttomZone划分

!

---zone的配置

zonenameblade2_CX4_120_SPB3vsan100

fcaliasnameCX4_120_SPB3vsan100

interfacefc1/1swwn20:

00:

00:

05:

9b:

76:

05:

c0

fcaliasnameblade2vsan100

interfacefc1/2swwn20:

00:

00:

05:

9b:

76:

05:

c0

zonenameblade2_CX4_120_SPA2vsan100

fcaliasnameCX4_120_SPA2vsan100

interfacefc1/3swwn20:

00:

00:

05:

9b:

76:

05:

c0

fcaliasnameblade2vsan100

interfacefc1/2swwn20:

00:

00:

05:

9b:

76:

05:

c0

!

---zoneset的配置

zonesetnametop-cfg-v100vsan100

zonenameblade1_CX4_120_SPB2vsan100

fcaliasnameCX4_120_SPB2vsan100

interfacefc1/1swwn20:

00:

00:

05:

9b:

76:

1a:

40

fcaliasnameblade1vsan100

interfacefc1/2swwn20:

00:

00:

05:

9b:

76:

1a:

40

zonenameblade1_CX4_120_SPA3vsan100

fcaliasnameCX4_120_SPA3vsan100

interfacefc1/3swwn20:

00:

00:

05:

9b:

76:

1a:

40

fcaliasnameblade1vsan100

interfacefc1/2swwn20:

00:

00:

05:

9b:

76:

1a:

40

2、交换机mds-9124-topZone的划分

!

---zone的配置

zonenameblade1_CX4_120_SPB2vsan100

fcaliasnameCX4_120_SPB2vsan100

interfacefc1/1swwn20:

00:

00:

05:

9b:

76:

1a:

40

fcaliasnameblade1vsan100

interfacefc1/2swwn20:

00:

00:

05:

9b:

76:

1a:

40

zonenameblade1_CX4_120_SPA3vsan100

fcaliasnameCX4_120_SPA3vsan100

interfacefc1/3swwn20:

00:

00:

05:

9b:

76:

1a:

40

fcaliasnameblade1vsan100

interfacefc1/2swwn20:

00:

00:

05:

9b:

76:

1a:

40

!

---zoneset的配置

zonesetnamebottom-cfg-v100vsan100

zonenameblade2_CX4_120_SPB3vsan100

fcaliasnameCX4_120_SPB3vsan100

interfacefc1/1swwn20:

00:

00:

05:

9b:

76:

05:

c0

fcaliasnameblade2vsan100

interfacefc1/2swwn20:

00:

00:

05:

9b:

76:

05:

c0

zonenameblade2_CX4_120_SPA2vsan100

fcaliasnameCX4_120_SPA2vsan100

interfacefc1/3swwn20:

00:

00:

05:

9b:

76:

05:

c0

fcaliasnameblade2vsan100

interfacefc1/2swwn20:

00:

00:

05:

9b:

76:

05:

c0

2.5CX4-120LUN配置

主机名称

绑定LUN号

大小

StorageGroup

备注

Hyper-V-Server1

0

40G

Hyper-V-Server1

BootLUN

Hyper-V-Server2

1

40G

Hyper-V-Server2

BootLUN

Hyper-V-Server3

2

40G

Hyper-V-Server3

BootLUN

Hyper-V-Server4

3

40G

Hyper-V-Server4

BootLUN

Hyper-V-Server5

4

40G

Hyper-V-Server5

BootLUN

Hyper-V-Server6

5

40G

Hyper-V-Server6

BootLUN

Hyper-V-Server7

6

40G

Hyper-V-Server7

BootLUN

Hyper-V-Server8

7

40G

Hyper-V-Server8

BootLUN

VMware-Server1

8

40G

VMware-Server1

BootLUN

VMware-Server2

9

40G

VMware-Server2

BootLUN

VMware-Server3

10

40G

VMware-Server3

BootLUN

VMware-Server4

11

40G

VMware-Server4

BootLUN

VMware-Server5

12

40G

VMware-Server5

BootLUN

VMware-Server6

13

40G

VMware-Server6

BootLUN

VMware-Server7

14

40G

VMware-Server7

BootLUN

VMware-Server8

15

40G

VMware-Server8

BootLUN

Hyper-V-Server1~8

16

1.7TB

none

DataLUNforHyper-V

VMware-Server1~8

17

1.8TB

none

DataLUNforVMwareESX

备注：

由于是BootfromSAN此时刀片服务器还没有配置IP地址,手动注册使用的是WWN地址来完成注册。

LUN16映射给Hyper-V-Server1至Hyper-V-Server8做为DataLUN；LUN17映射给VMware-Server1至VMware-Server8做为DataLUN；

3EMC软件安装与配置

3.1POWERPATH安装与配置

对于刀片服务器安装WindowsServer2008EnterpriseR2的操作系统、可以安装EMC的多路径冗余软件PowerPath；操作步骤如下：

1.安装EMCPowerPath步骤

双击安装文件，根据向导完成安装过程。

（安装完成后系统将重启）

2.配置PowerPath，使用以下命令配置和保存路径

Powermtconfig

Powermtsave

3.在平时维护时可以使用下面命令进行设备监控

Powermtdisplaydev=all

备注：

对于刀片服务器安装RHEL5.0的操作系统时、可以使用Linuxmpath命令来加载多路径管理；

4维护相关

4.1主机相关输出信息记录

[root@mailroot]#powermtdisplaydev=all

Pseudoname=emcpowera

CLARiiONID=CKM00090900095[Mail]

LogicaldeviceID=60060160635424009E689AE2DD8FDF11[LUN3]

state=alive;policy=CLAROpt;priority=0;queued-IOs=509

Owner:

default=SPB,current=SPB

==============================================================================

----------------Host----------------Stor---I/OPath---Stats---

###HWPathI/OPathsInterf.ModeStateQ-IOsErrors

==============================================================================

0QLogicFibreChannel2300sdaSPA0activealive00

0QLogicFibreChannel2300sdbSPB0activealive2570

1QLogicFibreChannel2300sdcSPA1activealive00

1QLogicFibreChannel2300sddSPB1activealive2520

4.2EMCCLARIIONCX系列开关机注意事项及详细步骤

基本顺序：

开机：

光纤交换机――存储设备――主机系统

关机：

主机系统――存储设备――光纤交换机

开机前注意事项：

1．磁盘阵列在加电前，为确保磁盘柜散热和工作正常，请确认所有磁盘柜的每个槽位都已经插上硬盘和挡风板。

2．开机前需确保――SPE或DPE至少要有一个正常工作的SP，每个DAE都至少要一块正常工作的LCC。

开机步骤：

1．检查所有供电线路联接是否正常,是否有松动或改动并改正。

2．从机柜顶部开始，由上至下打开所有DAE磁盘机箱的电源。

3．打开SPE（或DPE）机箱上两个电源的开关（机柜内部）。

4．打开机柜最底部两个电池（SPS）（CX300可以只有一个）的开关

5．开机完成.

关机前注意事项：

1.警告:

请不要在关闭两个电池（SPS）的电源开关前，关闭SPE,DPE,DAE等盘柜的任何一个电源,否则很可能会导致严重错误，并造成数据丢失!

（CX300可能只有一个SPS）

2.即使关闭两个电池（SPS）的电源开关后，也需要等待3分钟直到CX存储写缓存中的数据完全写入到硬盘上后，才可关闭DAE，SPE或DPE等盘柜的电源

3.停止所有对CX磁盘阵列访问的应用，以便所有的I/O能被从SP的写缓存写回到前5块盘上。

4.如果有UNIX服务器连接在CX磁盘阵列上，必须umountUNIX服务器所有与CX磁盘阵列相关的文件系统。

磁盘阵列关机步骤：

1.关闭机柜最底部的两个电池开关并等待约3分钟直到CX存储写缓存中的数据完全写入到硬盘上后，可看到电池的信号灯完全熄灭，且应看到因电池停止供电，SPE或DPE机箱及DAE-OS磁盘机箱的电源灯熄灭。

2.关闭SPE或DPE机箱及DAE-OS磁盘机箱的电源开关

3.由下至上，关闭所有DAE磁盘机箱的开关（机柜内部）

4.关闭机柜后面两侧机柜总开关

5.关机完成.