RDBMS and My Life
昨天晚上开始，发现右边牙齿有点痛，开始以为是由于最近天气热加上本人又舍不下最爱的辣椒上了火，到今天越来越痛了，还伴随有点低烧和轻微头晕，原来是长智齿了。这是我第二次切身体会到什么是“牙痛不是病，痛起来真要命”，之前还是读高二的时候牙痛过一次，喝水，讲话都不行，但不是长智齿。此时，俺嘴里含着一片生姜来减轻痛苦，还喝了苦得要命的凉茶再加上消炎药。内事问了一下baidu，就算要拔也要等到消炎不痛了才行，难受中。
智齿，学名第三大臼齿，俗称智慧齿、立事牙、尽头牙，是口腔最靠近喉咙的牙齿，如果全部生长出来一共4颗，上下颚各两颗，一般是于16岁或之后才生长出来，相较于幼儿时期长出的乳齿与儿童时期更换的恒齿，智齿通常是在人类心智已经趋于成熟时才长出，因而得名。在智齿的生长方面，个体差异很大，有的人20岁之前，有的人40、50岁才长，有的人终生不长，这都是正常的。而且四颗智齿也不是都必然会长全，某些人的智齿可能只长1至2颗，有的智齿甚至长到一半就不再生长，这种情况称为智齿阻生。
-The End-
很久没有更新博客了，当大家看到这个标题的时候可能会怀疑我是不是提前到了更年期了，我不知道男人到了40的年纪是不是也会有像女人一样的征兆，姑且认为差不多吧。
近段时间很忙，因为公司是IBM合作伙伴，为了获得承接某些项目的资历，大家都不断的学习考试，而我选择了102－IBM Certified Systems Expert – High Availability for AIX Technical Support and Administration，虽然IBM的考试不贵而且公司还报销，但是看到在前面考试的兄弟挂了压力还是蛮大的。目前公司的业务主要在小机和存储这边，数据库的业务少一些，由于以前没有怎么接触过小机，所以要恶补这方面的知识，但我又是那么那么的迷恋数据库，我又怎么可能放下呢！看书，看文档，实验一个都不落下。为了能与时俱进，出差前还是考了1Z0－040，12日途经武汉到宜昌，某电力公司系统扩容：2台P670做的HA、ORACLE数据库、CPU从4Way升到8Way、MEM从16G升到32G、磁盘增加一个T；客户的业务是不能停的，加上这种老机器拆装CPU风险高啊。实施之前查看环境做好备份，从13日周六开始干活到14日凌晨3：30，回到酒店洗完天都快亮了，中途实在是顶不住了趴在一张桌子上睡了会儿，哪知这一趴就一个小时，完全没有感觉到机房的寒冷。大公司机房多，有处理业务的系统，有监测水文、天气的系统，本人这次有幸到了那雄伟大坝的心脏，感受到了什么才叫专业级的监控，cool,very cool！结束了在宜昌五天的工作，下一站：黄石－鄂州－南昌，就这样不停的赶路－投店－机房的生活让人有点累，特别是到了晚上，想念老婆还有果果（他/她现在还在老婆肚子里面），屈指算算，有10天她没有听到我讲的睡前故事了，没有给她按摩了，不知道小家伙有没有想我呢！脑海总会想像她的可爱，她的调皮，我该买个什么样的相机去珍藏那一刻：卡片的太单调能突显她吗？单反的操作会不会太复杂我捕捉不到那一刻，或许那个时候看到她我就不觉得累了。昨天早上终于回到深圳了，快点回家赶在老婆七点出门上班，洗手消毒去摸摸她的肚子，9天肚子变大了一些，嘿嘿！洗澡、刮胡子、剪指甲，发现睡不着，去楼下剪头发，吃饭，睡觉，电话，电话，睡不着起床，等老婆下班回来跟果果说话。晚上十点，眼看就要恢复中断了9天的睡前故事，电话响了（技术部老总的）：
总：现在在哪儿呢？
我：今天早上回来的。
总：那正好，你现在马上到xxx来吧，客户(其实现在还不是我们的客户)的一套RAC系统出问题了。
我：好，就来。
背电脑、下楼、打车，经过重重安检11：00到达客户机房，了解情况：客户是一套双节点的10.2.0.4的RAC加二套DataGuard，在做了灾备演练failover后，一节点起不来了，alert*.log出现ORA-16009 in alert log with standby and LGWR ASYNC的错误，检查DG的配置信息：
log_archive_dest_2设置有VALID_FOR=(ONLINE_LOGFILE, PRIMARY_ROLE)
这个错误在metalink描述为一个Bug 4676659
ID 4676659.8
| Product (Component) | Oracle Server (Rdbms) |
| Range of versions believed to be affected | Versions >= 10.2 but < 11 |
| Versions confirmed as being affected | |
| Platforms affected |
客户的版本正好在受影响版本的范围。
最后决定，暂时在standby上取消远程归档路径：
SQL>alter system SET log_archive_dest_2 = ''
$ srvctl star instance -d intrac -i int2
$ srvctl status database -d intrac -v
至此，RAC系统恢复正常，此次故障究竟是否是碰到了BUG，还需要进一步的检查和测试来定案。
回到家，老婆早已经睡了，但她说了一句：老公回来了。躺床上久久不能久睡，思维还留在ORA-16009的一些疑问中，唉，又要失眠了。早上老婆问我是不是又3：30回来的，我说很早就回来了，0：30。
-The End-
为了确保客户机房搬迁一切顺利，今天中午的飞机到遵义。遵义，革命胜地，看看来自互联网的介绍：
遵义市位于贵州省北部，属云贵高原向四川盆地湖南丘陵地带过渡的东斜坡北段，处于省会贵阳市和重庆市之间，西北部与四川接旅游地图——点击可以放大壤，以北背靠重庆市，以南面对贵阳。是贵州的第二大城市，也是贵州北线旅游的中心，是国务院首批公布的全国24个历史文化名城之一。
遵义历史悠久，文化源远流长，到了近代，更以著名的遵义会议，奠定了它在中国革命历史上的重要地位。
遵义山川秀丽，风光独特，尤以山、水、林、洞为主要特色。这里有一个国家级风景名胜区和四个省级风景名胜区，近千处文物点。如被称为“西南古代雕刻艺术宝库”的杨粲墓、被誉为“生物活化石”的国家级桫椤自然保护区、“神州又一奇观”赤水十丈洞瀑布等，真可谓处处有佳境，步步有名胜。
此时，很想念家的温馨，想念LP和二个月的宝宝，希望一切顺利能早点回家。今晚又是一个不眠夜。
-The End-
今天心情TNND很不爽。早上七点钟起来想撒尿了回去睡个回笼觉，不料电话响了，这时候电话响一定不是什么好事。果不其然，接到上级的电话说一个客户的一台P570昨晚三点多宕机了，系统宕机了当然Oracle数据库也宕了，叫我赶紧打车过去。五分钟后出门，不知道咋地，深圳这二天到处大塞车，八点多到客户监控中心，小机已经起来了，oracle也起来了。客户要宕机原因，登录上去检查，oracle的alert.log没有记录任何错误信息，系统的errpt、mail也没有发现什么异常的错误，去机房检查，指示灯一切正常，以我现有的能力实在是找不真正宕机的原因，打算跟客户汇报一下情况，不料麻烦就来了。客户管事的说今天一定要原因，如果我搞不定打电话叫我们公司派个老鸟来，如果你们老鸟还搞不定你们去请IBM的原厂工程师来，在老鸟没来之前，我不能离开。咋的，扣人啊，我顶你个肺啊……！这种情况，就算IBM的原厂工程师来了也不一定能搞得定，是系统就会有出问题的一天，并不是所有的问题都答案，或者不能马上有答案的。等了快一个小时，老鸟来了，结果一样，无法确定原因。最后的解决办法是取DUMP文件回去分析。说实话，DUMP这玩意儿也很难分析出原因，也不是一天二天就能得出结论的，不过总之得给客户一个交待才说得过去啊。就在要离开的时候，客户的另一台PC SERVER也重启了，跟先前的570一样，也没有找到一个确切的原因，日志没有记录。下午，另一个客户数据库报ORA-07445的错误，这是一个RAC的环境，前天因为客户的工程师自己把的所有归档删除了重组了Data Guard，是另一个兄弟过去处理的，不知道搞定了没有。唉，可能天天呆机房时间太久的原因，头从中午痛到现在，总之今天很郁闷，本想把这几天技术上的问题总结一下的，周末再说吧。
-The End-