SA Blog --系统管理员的博客生涯

书写自己的系统管理博客生涯
posts(330) comments(254) trackbacks(0)
  • IT博客
  • 联系
  • RSS 2.0 Feed 聚合
  • 管理

常用链接

  • 我的随笔
  • 我的评论
  • 我参与的随笔

留言簿

  • 给我留言
  • 查看公开留言
  • 查看私人留言

随笔分类(395)

  • *UNIX系统(148)
  • Cloud(3)
  • Moive
  • Music(1)
  • OpenStack(7)
  • openstack
  • Wiki(1)
  • Windows系统(32)
  • 其他(33)
  • 娱乐
  • 存储相关(22)
  • 存储网络(10)
  • 常用工具下载(25)
  • 数据库应用技术(53)
  • 网络技术(41)
  • 英语
  • 虚拟化(19)

随笔档案(330)

  • 2020年9月 (1)
  • 2020年8月 (1)
  • 2020年7月 (8)
  • 2020年4月 (1)
  • 2020年2月 (1)
  • 2020年1月 (1)
  • 2019年9月 (2)
  • 2019年4月 (1)
  • 2016年1月 (1)
  • 2015年12月 (1)
  • 2015年7月 (4)
  • 2015年5月 (2)
  • 2014年3月 (2)
  • 2014年1月 (1)
  • 2013年12月 (1)
  • 2013年3月 (5)
  • 2013年2月 (4)
  • 2012年12月 (1)
  • 2012年11月 (2)
  • 2012年9月 (2)
  • 2012年8月 (1)
  • 2012年6月 (1)
  • 2012年5月 (1)
  • 2012年1月 (1)
  • 2011年12月 (2)
  • 2011年10月 (1)
  • 2011年9月 (3)
  • 2011年8月 (1)
  • 2011年7月 (5)
  • 2011年6月 (3)
  • 2011年5月 (5)
  • 2011年4月 (2)
  • 2011年3月 (2)
  • 2011年2月 (1)
  • 2011年1月 (5)
  • 2010年12月 (1)
  • 2010年11月 (4)
  • 2010年9月 (13)
  • 2010年8月 (4)
  • 2010年7月 (5)
  • 2010年6月 (5)
  • 2010年5月 (13)
  • 2010年4月 (10)
  • 2010年3月 (5)
  • 2010年2月 (1)
  • 2010年1月 (9)
  • 2009年12月 (5)
  • 2009年11月 (5)
  • 2009年10月 (1)
  • 2009年9月 (3)
  • 2009年8月 (2)
  • 2009年7月 (6)
  • 2009年6月 (3)
  • 2009年5月 (2)
  • 2009年4月 (1)
  • 2009年3月 (2)
  • 2009年2月 (3)
  • 2008年12月 (3)
  • 2008年11月 (1)
  • 2008年10月 (9)
  • 2008年9月 (5)
  • 2008年8月 (3)
  • 2008年7月 (1)
  • 2008年6月 (1)
  • 2008年5月 (2)
  • 2008年4月 (1)
  • 2008年3月 (1)
  • 2008年2月 (3)
  • 2008年1月 (1)
  • 2007年12月 (5)
  • 2007年11月 (1)
  • 2007年10月 (6)
  • 2007年9月 (4)
  • 2007年8月 (4)
  • 2007年7月 (34)
  • 2007年6月 (1)
  • 2007年4月 (2)
  • 2007年3月 (1)
  • 2007年2月 (1)
  • 2006年11月 (1)
  • 2006年9月 (4)
  • 2006年8月 (4)
  • 2006年7月 (1)
  • 2006年6月 (10)
  • 2006年5月 (3)
  • 2006年4月 (14)
  • 2006年2月 (6)
  • 2006年1月 (6)
  • 2005年12月 (12)

收藏夹(5)

  • Other(5)

IT技术

  • MSDN 库(中文)
  • 欢迎使用 MSDN 库(中文),MSDN 库为使用 Microsoft® 工具、产品、技术和服务的开发人员提供必不可少的信息资源。MSDN 库包含操作方法和参考文档、示例代码、技术文章和其他内容。请浏览目录或使用搜索功能来查找所需内容。

健康

  • 体检咨询
  • 北京体检 体检咨询
  • 足医生
  • 足医生

友情链接

  • TestLink中文论坛
  • Testlink 中文论坛
  • 备案专题
  • 备案专题
  • 微软大中华区安全博客
  • 微软大中华区安全博客

存储技术

  • doit存储
  • doit 存储,存储热门论坛
  • ITPUB
  • Oracle DBA 热门中文社区
  • TechTarget IT专家网
  • 蓝德科技

网络技术

  • ChinaUnix 中文社区
  • ChinaUnix 热门中文社区

搜索

  •  

最新评论

  • 1. re: 吐槽一下阿里系软件,就是天天的升级???
  • 评论内容较长,点击标题查看
  • --David
  • 2. re: Symantec Backup exec system recovery 2010(BESR 2010)故障汇总
  • 评论内容较长,点击标题查看
  • --112
  • 3. re: OpenStack安装部署管理中常见问题解决方法(OpenStack-Lite-FAQ)
  • /home/stack/devstack/tools/worlddump.py -d /home/stack/logs
    求救这是什么问题啊。
  • --陈晓龙
  • 4. re: nokia 手机密码忘记后破解
  • nokia 2630,密码不见,恳请帮忙,谢谢
    串号:355219037959407
    lipolipo@gmail.com
  • --沈同学
  • 5. re: chroot 工具 jailkit 限制用户 活动范围 和 权限 _ 笔记
  • 是一个很好的工具嘛。感谢分享。
  • --少林功夫好

阅读排行榜

评论排行榜

View Post

hp msa 1000双机热备及存储--系统调试全过程

这是我第一次做双机热备和存储,以前只是自己玩玩linux 再深入的东西就没有了,对存储也只有一个大概的认识。所以这个系统调试对我来说很有意义,而且确实遇到了很多问题,放在这里和大家分享,共同学习,因为我也是第一次做 ,双机热备的软件是用的专业软件,所以这里对双机的探讨不多。


硬件:服务器:两台hp dl   380g4  ,双cpu ,两块scsi硬盘78g(smart array 6i控制器),做成raid1,hba卡为每台服务器两块qlogic2300,板带双网卡bcm5700
光交换机 两台 hp storage works 2/8q fiber channel switch
5m FC cable x 6
msa1000 1个 控制器2个。(右边是主,左边是从),raid1+0,14块硬盘(都是148g)

软件:redhat  2.1 (kernel 2.4.9-e3)  惠普带的smartstart  cd

开始:
硬盘做成raid1,可以在开始按f8在bios(是不是叫bios啊,反正台式机里这么叫)里边对两块硬盘做初始化,创建logic分区。不过最好是用服务器带的smart cd  里边的工具还是很好用的,最好在安装前先看好所带的说明书。

安装linux系统
1、硬盘问题
因为要与以前的系统兼容,所以需要安装redhat 7.2,后来又换成了2.1,首先就是安装时候系统认不出硬盘,因为服务器只带了for win 和 netware 的驱动(不知道for netware的驱动行不行 能不能用,我没试),去惠普的英文网站上下载了for 380G4的smart  array 6i 的驱动程序,用rawwrite做成驱动软盘,安装时用 linux dd,成功加载驱动,系统安装成功。

--说明:如果随机带的东西没有你需要的驱动,那么去hp英文网站找驱动吧,那里比较全,很多你在中文网站上是根本就找不到的(鄙视一下,为什么就不把中文支持做的好一些),如果hp网站上没有,可以去板卡的生产厂家去找(比如网卡,hba卡什么的)。

2、网卡驱动
网卡是bcm5700,这个可以在bios里边看到的,安装后网卡当然是认不出来了 内核太老了,去下载了驱动,结果安装完成后用不了,insmod bcm5700后提示内核版本不对,呵呵,折腾了几次,换了几个版本的驱动尝试(不知道这样会不会有什么潜在的危险),最后,我仔细看了几个驱动的安装说明,最后安装了最正确的版本的驱动程序,(注意:这里我要说的是,仔细阅读安装的说明文件是很重要的,我就是按照上边提示的步骤一步一步去做,最后做成了)安装终于成功。insmod 加载模块后,设置好网卡的地址什么的,记住要按照安装说明在/etc/modules.conf里边加上相关的说明语句。安装完成后系统启动后会自动加载模块,因为在安装驱动的时候这部分已经被编译进了内核。这和后边的hba卡驱动不同。

3、hba卡驱动

hba卡实际上是qlogic的qla2300
还是去qlogic网站上下载驱动,具体的安装过程我就不说了去按照说明安装,只要你选对了版本,比网卡的安装要简单多了。
安装好后insmod qla2300,光纤交换机的灯终于亮了。然后的一个问题就是:系统启动时候光纤卡驱动不会自动load,那么在rc.local 里边加上吧,这样系统启动的最后,会加载这个模块,我在里边加的语句是:
insmod  qla2300 ql2xfailover=1  
这里重点说说failover参数,这个参数的作用就是把两路光纤通路绑定为一路。我试过不加failover参数,就可以杂dmesg里边看到加载了sda和sdb两个空间,所以要加这个参数。还有一个作用就是双路切换,如果一路出现问题,有这个参数就可以自动切换到另一路,很多人讨论的 secure path 其实就是一个用第三方软件来实现failover参数的功能,因为支持failover(并不是所有hba卡都支持这个参数),所以我没有安装三方软件。

到这里linux系统的安装就完成了。双机软件我们用的专业软件,配置方面是厂家做的,不再多说。

msa1000的初始,用带的smartstart cd 去对msa1000进行初始化设置,这部分只要根据安装说明文档根据需要进行,也不多说了。初始化好以后。就可以把它作为sda1 mount到系统里边去了。

4、故障的排除。
全部安装好以后,做了几次测试,就是把服务器、光交换机进行人造故障,使其不能正常工作,观察是否能够保持系统的可用性,所谓热备也就是这么回事吧。(具体点,服务器全好,光交换机全好;一台服务器好,两台光交换机好,两台服务器好,一台光交换机好,一台服务器好,一台光交换机好,翻来覆去试吧,最好把可能的情况都试试,要对客户负责^_^)

后来发现问题了:两台服务器有时候可以正常切换,但是有时候双机是可以切换的,但是系统的数据库服务却无法正常运行,看日志,不能mount sda1,此时我做试验,lsmod看qla2300已经正常加载了,fdisk -l 无法看到sda 。出问题的是服务器1,我试用rmmod qla2300,然后再insmod qla2300 ql2xfailover=1,加载过程很漫长(仔细观察的话,可以发现这点,聪明的你可能已经会找出问题所在了),加载后,还是无法mount, 我再试,停止,再次加载模块,这次我用的是insmod qla2300,没有加failover参数,结果加载成功,可mount,再观察msa1000,控制器已经切换到另外一台了,此时,如果我对这套系统稍有经验,或者能够静些心 仔细分析,能够马上就得出hba卡有问题的结论(因为灯都亮,但是仔细观察,会发现有一路灯是在切换时候不闪烁的),但是当时关心则乱。以为是软件安装设置有问题,(仔细想想,第二台服务器是正常的,两台服务器的软件是相同的),调了很久,最后,我觉得和msa的控制器有关,因为两个控制器当其中从控制器起作用时候,那么系统是运行正常的,当主控制器控制时,就会有1号服务器无法正常mount的问题,我把1号服务器的两条光纤位置换一下,发现这时候主控制器控制时 能正常,从控制器控制时,系统有问题,而直到这时(该打!!)我猛然发现二号服务器完全正常啊,然后把二号服务器的一块hba卡拔下来到1号服务器上单独试,一切正常。(在这里说起来简单,其实中间先后测了卡和不同的插槽,试了很多次),确定问题所在:hba卡。

为什么呢?因为只有1路是好的,所以只有连接到一台交换机的通路是通的,而那台交换机刚好连接到msa 的从控制器。这样当从控制器控制时,我加不加failover参数,服务器都能找到一条通道来看到msa1000,一切都正常,而当主控制器控制时, 我加failover参数,这时候正常的一路因为连接的是从控制器,无法看到msa1000,而failover到另外一路,这时候因为hba卡有问题,所以是找不到通路的,所以failover失败。这时候是看不到msa的,当我手工rmmod后再从新用insmod2300,不加failovre,此时服务器自动去找好的链路去msa,这时候加载成功了,而且msa1000的控制器会切换到1号服务器正常线路所在的从控制器来进行控制。(msa1000会接受服务器的控制信号?)

这就是我第一次调试的过程,还有很多地方不懂,估计配置里可能会存在问题,希望高手看了,能给出些指引。




网卡和阵列卡的驱动都应该直接从hp站点上下载,又专门的驱动的.

FCA2214(oem qlogic2312) 在firmware上还是和原来的那个不太一样的,msa1000的controller, SSP要打开,connection profile要选择正确的操作系统. 这些如果都不做好,用起来会有问题的.

posted on 2006-02-06 23:05 David 阅读(1689) 评论(0)  编辑 收藏 引用 所属分类: *UNIX系统 、存储相关

只有注册用户登录后才能发表评论。
 
Powered by:
IT博客
Copyright © David