本地硬盘的I/O突然变得很繁忙，达到100%，该查看哪些东西啊 - AIX -IBM UNIX - LoveUnix -- 最强AIX小机技术论坛,UNIX,Linux,存储,数据库,中间件,开发,管理 -- 蓝色的IBM技术天堂 --bbs.LoveUnix.net

fayella

LU幼天使

UID 102160
精华 0
积分 36
帖子 63
活跃指数 13
LU金币 61 个
LU金条 0 个
阅读权限 20
注册 2008-2-1

#1

大中小

使用道具

发表于 2008-5-6 11:50 资料个人空间短消息加为好友

本地硬盘的I/O突然变得很繁忙，达到100%，该查看哪些东西啊

主机P690  做数据库服务器
本地磁盘（rootvg硬盘）突然变得很忙  telnet上命令操作都很慢  就像是PC里面的死机
topas:
Topas Monitor for host: p690db             EVENTS/QUEUES FILE/TTY
Tue May  6 11:33:18 2008 Interval:  2       Cswitch 19290  Readch 91.9M
                                             Syscall 57870  Writech 3663.4K
Kernel 13.1 |####                      |  Reads    3767  Rawin       2
User    26.3 |########                   |  Writes    676  Ttyout    1010
Wait    54.6 |################          |  Forks       28  Igets       0
Idle    6.0 |##                         |  Execs       32  Namei    2606
                                             Runqueue 2.0  Dirblk       0
Network  KBPS I-Pack  O-Pack KB-In  KB-Out  Waitqueue  10.0
en0 17273.4  14784.5  8428.5 12657.2  4616.2
lo0    3.0    18.0 18.0    1.5    1.5  PAGING          MEMORY
en5    0.5    5.0    1.5    0.3    0.2  Faults 10364  Real,MB 16384
                                             Steals       0  % Comp    96.7
Disk Busy%    KBPS    TPS KB-Read KB-Writ  PgspIn    319  % Noncomp 3.1
hdisk1  100.0 786.2 197.0 704.0 82.2  PgspOut    0  % Client 2.1
hdisk0  100.0 672.2 168.5 590.0 82.2  PageIn    324
power207 51.5 1664.0 72.5  1664.0    0.0  PageOut    1  PAGING SPACE
power172 48.5 1320.0 82.5  1320.0    0.0  Sios       324  Size,MB 8192
power168 45.5  13072.0 152.5 13064.0    8.0                % Used    46.9
power160 43.0 1672.0 41.5  1656.0 16.0  NFS (calls/sec)  % Free    53.0
disk1117 30.5 5384.0 94.0  5376.0    8.0  ServerV2    0
power202 30.0  13232.0 44.5 13232.0    0.0  ClientV2    0 Press:
hdisk808 30.0 776.0 48.5 776.0    0.0  ServerV3    0 "h" for help
hdisk843 30.0 1096.0 39.0  1096.0    0.0  ClientV3    0 "q" to quit
power214 28.0 560.0 35.0 560.0    0.0

Name          PID  CPU%  PgSp Owner
oracle    4276416 6.8 6.9 oracle
oracle    4231226 4.4 5.5 oracle
oracle    3907782 3.3 8.2 oracle
oracle    5140642 2.2 6.1 oracle
oracle    2998308 1.5 5.6 oracle
oracle    884816 1.2 8.5 oracle
oracle    1957934 1.2 5.4 oracle
oracle    684206 1.2 8.4 oracle
IBM.Host    651442 0.9 2.9 root
oracle    3055732 0.8 5.7 oracle

此时errpt里新产生几个错误

IDENTIFIER TIMESTAMP  T C RESOURCE_NAME  DESCRIPTION
12081DC6 0506113008 P S harmad       SOFTWARE PROGRAM ERROR
[p690db:root:/]#errpt -aj 12081DC6
---------------------------------------------------------------------------
LABEL:       HA002_ER
IDENTIFIER:    12081DC6

Date/Time:    Tue May  6 11:30:27 BEIST 2008
Sequence Number: 14310
Machine Id:    0036966E4C00
Node Id:       p690db
Class:          S
Type:          PERM
Resource Name: harmad

Description
SOFTWARE PROGRAM ERROR

Probable Causes
SUBSYSTEM

Failure Causes
SUBSYSTEM

      Recommended Actions
      REPORT DETAILED DATA
      CONTACT APPROPRIATE SERVICE REPRESENTATIVE

Detail Data
DETECTING MODULE
LPP=PSSP,Fn=aixos_spmiretry.c,SID=1.4,L#=321,
DIAGNOSTIC EXPLANATION
aixos_retrySpmiPathGetCx(): 2522-629 SPMI routine SpmiPathGetCx returned error 192:
Spmi: Common Memory locked by process 4264140, requestor: 671824 (

看起来是应用问题造成的但是不知道具体什么原因
帮忙分析下
应该查看哪些东西。
谢谢了

fayella

LU幼天使

UID 102160
精华 0
积分 36
帖子 63
活跃指数 13
LU金币 61 个
LU金条 0 个
阅读权限 20
注册 2008-2-1

#2

大中小

使用道具

发表于 2008-5-6 12:58 资料个人空间短消息加为好友

嗯。。thx...

笨笨猪

版主

有健康，才有将来！

UID 25919
精华 3
积分 1049
帖子 1881
活跃指数 95
LU金币 1109 个
LU金条 4954 个
阅读权限 210
注册 2004-8-17
来自广州

#3

大中小

使用道具

发表于 2008-5-6 13:02 资料个人空间主页短消息加为好友

数据库的问题，你看看Oracle 里的SQL有没有问题，比如死锁之类的。

胖胖猪

LU小天使

UID 104606
精华 1
积分 240
帖子 398
活跃指数 43
LU金币 381 个
LU金条 0 个
阅读权限 20
注册 2008-3-31
来自安徽

#4

大中小

使用道具

发表于 2008-5-6 13:09 资料个人空间短消息加为好友

死锁,系统不会产生报错吧

燕狂徒

版主

UID 59
精华 14
积分 1708
帖子 3209
活跃指数 155
LU金币 4925 个
LU金条 616 个
阅读权限 210
注册 2003-9-19

#5

大中小

使用道具

发表于 2008-5-6 13:27 资料个人空间主页短消息加为好友

换页比较高了，其他给的信息不全，不好说

http://www.100c.com.cn/oblog/user1/1/index.html

东北小张

LU幼天使

UID 105399
精华 0
积分 50
帖子 75
活跃指数 11
LU金币 81 个
LU金条 0 个
阅读权限 20
注册 2008-4-16

#6

大中小

使用道具

发表于 2008-5-6 13:43 资料个人空间短消息加为好友

是不是oracle生成了很多core文件？

[广告] 记录自己的思想火花，留住每日的技术积累，尽在拥有属于自己独立域名的博客。

meilixueshan

LU幼天使

UID 45071
精华 0
积分 178
帖子 339
活跃指数 0
LU金币 256 个
LU金条 0 个
阅读权限 20
注册 2006-4-14

#7

大中小

使用道具

发表于 2008-5-6 13:45 资料个人空间短消息加为好友

oracle的回报错，看session能看到
但是主机是不会有死锁这方面的

[广告] 记录自己的思想火花，留住每日的技术积累，尽在拥有属于自己独立域名的博客。

netbbs

LU小天使

UID 28605
精华 1
积分 263
帖子 394
活跃指数 31
LU金币 2372 个
LU金条 0 个
阅读权限 20
注册 2004-12-28

#8

大中小

使用道具

发表于 2008-5-6 14:00 资料个人空间短消息加为好友

看看oracle的alert是不是有产生了太多的trace

平身修得随缘性；
粗茶淡饭也知足。

[广告] 记录自己的思想火花，留住每日的技术积累，尽在拥有属于自己独立域名的博客。

fayella

LU幼天使

UID 102160
精华 0
积分 36
帖子 63
活跃指数 13
LU金币 61 个
LU金条 0 个
阅读权限 20
注册 2008-2-1

#9

大中小

使用道具

发表于 2008-5-6 14:10 资料个人空间短消息加为好友

谢谢LS几位数据库工程师来查了看是什么原因

只是在今天中午有半小时左右出现这样情况之后到现在都还是正常的

[广告] 记录自己的思想火花，留住每日的技术积累，尽在拥有属于自己独立域名的博客。

lj_cd (蓝色竹叶)

LU天使

UID 42317
精华 4
积分 730
帖子 1315
活跃指数 87
LU金币 1797 个
LU金条 0 个
阅读权限 50
注册 2006-3-13
来自 sz

#10

大中小

使用道具

发表于 2008-5-6 21:58 资料个人空间短消息加为好友

什么系统有那么多的盘？不如增加内存或建个页面空间放在存储上

老农

管理员

民工

UID 2
精华 26
积分 17017
帖子 28765
活跃指数 1713
LU金币 24147 个
LU金条 0 个
阅读权限 255
注册 2003-9-16
来自北京

#11

大中小

使用道具

发表于 2008-5-7 00:29 资料个人空间主页短消息加为好友

性能问题不是这么简单的信息就能分析出来的

IBM小机AIX等系列培训，9月9号开始，北京，欢迎关注
http://www.loveunix.net/viewthread.php?tid=86749&

提供IBM小机及存储相关专业技术咨询、实施、维保和培训，代理备机及配件。EMAIL：allenlong68[at]hotmail.com。[at]换成@

AIX交友QQ群：24807728（群是朋友聊天用的，技术请在论坛谈。群满，不活动的会被请出，给新人腾位置）
QQ里谈技术没积累，是方便自己麻烦别人。在论坛里讨论，可以大家都参与，并留下参考。
技术不是简单看个文档就能提高的，多参与讨论进步快。对问题有见解的就发一下，说对了是帮助别人，说错了给机会纠正自己。

yddll

技术专家

Leave blank

UID 212
精华 4
积分 1478
帖子 2325
活跃指数 61
LU金币 2277 个
LU金条 5500 个
阅读权限 200
注册 2003-9-29

#12

大中小

使用道具

发表于 2008-5-7 00:55 资料个人空间短消息加为好友

QUOTE:

DETECTING MODULE
LPP=PSSP,Fn=aixos_spmiretry.c,SID=1.4,L#=321,
DIAGNOSTIC EXPLANATION
aixos_retrySpmiPathGetCx(): 2522-629 SPMI routine SpmiPathGetCx returned error 192:
Spmi: Common Memory locked by process 4264140, requestor: 671824 (

这个和你的busy100%问题没啥直接关系吧，看看4264140和671824是啥啊，在IBM网站上以“HA002_ER”为关键词，可以搜到一边文章讲这个的

老人新手。