热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

slp_srvrtop进程,cluster.log大量日志

一个数据库主机var目录很高[biprd1]root#df -gFilesystem  GBblocks   Free%Used  Iu

一个数据库主机/var目录很高

[biprd1]root#df  -g

Filesystem    GB blocks      Free %Used    Iused %Iused Mounted on

/dev/hd4           0.50      0.26   49%    10920    15% /

/dev/hd2           7.00      3.17   55%    56403     8% /usr

/dev/hd9var        5.00      0.31   94%     7284     8% /var

/dev/hd3           1.50      0.88   42%    20596     9% /tmp

/dev/hd1           0.12      0.07   42%      187     2% /home

/dev/hd11admin      0.12      0.12    1%        5     1% /admin

/proc                 -         -    -         -     -  /proc

/dev/hd10opt       6.00      3.09   49%    22598     4% /opt

/dev/livedump      0.25      0.25    1%        5     1% /var/adm/ras/livedump

/dev/u01_fs       30.00     11.93   61%   235400     8% /u01

/dev/tsmlog        0.25      0.25    1%        9     1% /tsmlog

/dev/fslv00       60.00     44.19   27%       12     1% /bibak

/dev/nmonlv        0.50      0.31   38%       39     1% /nmon

/dev/backup_fs     40.00     13.00   68%       76     1% /backup

/dev/u02_fs      409.00    167.11   60%      398     1% /u02


top进程主要是两个,cpu IDLE 7%:

Topas Monitor for host:    biprd1               EVENTS/QUEUES    FILE/TTY

Tue Mar 26 15:29:49 2019   Interval:  2         Cswitch     912  Readch  1750.2K

                                                Syscall  494.2K  Writech 2225.9K

CPU  User%  Kern%  Wait%  Idle%  Physc   Entc   Reads       481  Rawin         0

ALL   45.4   47.7    0.0    6.8   0.50   99.8   Writes    80508  Ttyout      576

                                                Forks         4  Igets         0

Network  KBPS   I-Pack  O-Pack   KB-In  KB-Out  Execs         4  Namei     14864

Total     2.5     20.0     5.6     1.4     1.2  Runqueue    7.2  Dirblk        0

                                                Waitqueue   0.0

Disk    Busy%     KBPS     TPS KB-Read KB-Writ                   MEMORY

Total     0.4   1024.0     8.0     0.0  1024.0  PAGING           Real,MB   12544

                                                Faults     2558  % Comp     77

FileSystem        KBPS     TPS KB-Read KB-Writ  Steals        0  % Noncomp   5

Total              2.7K    8.3K   1.7K   1.0K   PgspIn        0  % Client    5

                                                PgspOut       0

Name            PID  CPU%  PgSp Owner           PageIn        0  PAGING SPACE

slp_srvr    3735686  50.0 128.6 root            PageOut     256  Size,MB    8192

syslogd     4718742  50.0   5.4 root            Sios        256  % Used     13

topas      29294718   0.0   4.6 root                             % Free     87

sleep      31719550   0.0   0.2 root            NFS (calls/sec)

sshd       36831360   0.0   4.1 root            SerV2         0  WPAR Activ     0

oracle     19136702   0.0  15.7 oracle          CliV2         0  WPAR Total     0

oracle     44433504   0.0  13.7 oracle          SerV3         0  Press: "h"-help

oracle     27721982   0.0  13.7 oracle          CliV3         0         "q"-quit

oracle     14745714   0.0  13.9 oracle

vmmd         458766   0.0   1.2 root  

oracle     10682470   0.0  18.3 oracle

lrud         262152   0.0   0.5 root  

oracle     11337728   0.0  20.1 oracle

oracle      8978578   0.0  13.9 oracle

oracle      8192170   0.0  13.8 oracle

syncd       2228416   0.0   0.6 root

clcomd      8519684   0.0   4.9 root

EvMgrC      5570622   0.0  10.0 root

nfsd        2949318   0.0   1.8 root

ksh         7012396   0.0   0.5 root  

报错信息如下:


[biprd1]root#cat /var/hacmp/adm/cluster.log

.......

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Mar 26 15:19:41 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

.....



通过重启服务问题依旧,日志文件大约每三分钟就增长100M

stopsrc -s syslogd

startsrc -s syslogd



于是kill   slp_srvr进程



[biprd1]root#ps -ef|grep slp

    root  2818092        1   0   Sep 24      -  0:52 /opt/ibm/director/cimom/bin/tier1slp

    root  3735686        1  66   Sep 24      - 2136:34 ./slp_srvreg -D

    root 16646316 16253072   0 16:40:51  pts/0  0:00 grep slp

[biprd1]root#kill -9 3735686

[biprd1]root#



马上停止生成日志,cpu也降了下来,再将slp_srvr进程起来


cd /usr/sbin

./slp_srvreg -D



[biprd1]root#df  -g

Filesystem    GB blocks      Free %Used    Iused %Iused Mounted on

/dev/hd4           0.50      0.26   49%    10921    15% /

/dev/hd2           7.00      3.17   55%    56403     8% /usr

/dev/hd9var        5.00      1.58   69%     7296     2% /var

/dev/hd3           1.50      0.88   42%    20596     9% /tmp

/dev/hd1           0.12      0.07   42%      187     2% /home

/dev/hd11admin      0.12      0.12    1%        5     1% /admin

/proc                 -         -    -         -     -  /proc

/dev/hd10opt       6.00      3.09   49%    22645     4% /opt

/dev/livedump      0.25      0.25    1%        5     1% /var/adm/ras/livedump

/dev/u01_fs       30.00     11.93   61%   235774     8% /u01

/dev/tsmlog        0.25      0.25    1%        9     1% /tsmlog

/dev/fslv00       60.00     44.19   27%       12     1% /bibak

/dev/nmonlv        0.50      0.31   38%       39     1% /nmon

/dev/backup_fs     40.00     13.00   68%       76     1% /backup

/dev/u02_fs      409.00    166.94   60%      400     1% /u02

[biprd1]root#iostat 1 4


System configuration: lcpu=8 drives=5 ent=0.50 paths=10 vdisks=6


tty:      tin         tout    avg-cpu: % user % sys % idle % iowait physc % entc

          0.0        108.6                0.5   3.3   95.9      0.2   0.0    7.0


Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn

hdisk0           0.0       0.0       0.0          0         0

hdisk5           1.0      25.5       6.4         16         0

hdisk1           0.0       0.0       0.0          0         0

hdisk6           0.0       0.0       0.0          0         0

hdisk7           0.0       0.0       0.0          0         0


tty:      tin         tout    avg-cpu: % user % sys % idle % iowait physc % entc

          0.0        865.0               18.5   8.7   72.9      0.0   0.2   36.0


Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn

hdisk0           0.0       0.0       0.0          0         0

hdisk5           0.0      19.0       4.8          0        12

hdisk1           0.0       0.0       0.0          0         0

hdisk6           0.0      76.0       4.8          0        48

hdisk7           0.0       0.0       0.0          0         0


tty:      tin         tout    avg-cpu: % user % sys % idle % iowait physc % entc

          0.0        873.6                0.4   2.8   96.8      0.0   0.0    5.9


Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn

hdisk0           0.0       0.0       0.0          0         0

hdisk5           0.0       0.0       0.0          0         0

hdisk1           0.0       0.0       0.0          0         0

hdisk6           0.0       0.0       0.0          0         0

hdisk7           0.0       0.0       0.0          0         0


tty:      tin         tout    avg-cpu: % user % sys % idle % iowait physc % entc

          0.0        873.6                0.4   2.9   96.8      0.0   0.0    6.0


Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn

hdisk0           0.0       0.0       0.0          0         0

hdisk5           0.0       0.0       0.0          0         0

hdisk1           0.0       0.0       0.0          0         0

hdisk6           0.0       0.0       0.0          0         0

hdisk7           0.0       0.0       0.0          0         0



[biprd1]root#ls  -l

total 2099800

-rw-r--r--    1 root     system            0 Nov 28 2011  clavan.log

-rw-r--r--    1 root     system     74978079 Apr 02 09:04 cluster.log

-rw-r--r--    1 root     system    100000040 Apr 01 16:39 cluster.log.0

-rw-r--r--    1 root     system    100000078 Apr 01 16:36 cluster.log.1

-rw-r--r--    1 root     system    100000002 Apr 01 16:34 cluster.log.2

-rw-r--r--    1 root     system    100000002 Apr 01 16:31 cluster.log.3

-rw-r--r--    1 root     system    100000002 Apr 01 16:28 cluster.log.4

-rw-r--r--    1 root     system    100000040 Apr 01 16:26 cluster.log.5

-rw-r--r--    1 root     system    100000116 Apr 01 16:23 cluster.log.6

-rw-r--r--    1 root     system    100000078 Apr 01 16:21 cluster.log.7

-rw-r--r--    1 root     system    100000078 Apr 01 16:18 cluster.log.8

-rw-r--r--    1 root     system    100000078 Apr 01 16:15 cluster.log.9

drwxr-xr-x    2 root     system        12288 Mar 07 2018  history

drwxr-xr-x    2 root     system          256 Sep 24 2016  wpar


可见日志不再大量生产


Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-031 [804399472] Calloc call failed. errno = 804399468.

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 16:41:10 biprd1 daemon:err|error  syslog: slp: 0660-080 [804399792] SLPServiceListener -- The SA failed to compute received message: 潇 (-21).

Apr  1 17:04:50 biprd1 daemon:err|error syslog: slp: 0660-065 [804398544] Impossible to parse attribute |^L^Am.

Apr  1 17:04:50 biprd1 daemon:err|error syslog: slp: [804398928] decode_srvreg -- __srv_reg_local failed with rc = 804398924.

Apr  1 17:04:50 biprd1 daemon:err|error syslog: slp: 0660-084 [804399280] The SA failed to decode and compute received message: 醊繼Am (-2).

Apr  1 18:04:50 biprd1 daemon:err|error syslog: slp: 0660-065 [804398544] Impossible to parse attribute |^L^Am.

Apr  1 18:04:50 biprd1 daemon:err|error syslog: slp: [804398928] decode_srvreg -- __srv_reg_local failed with rc = 804398924.

Apr  1 18:04:50 biprd1 daemon:err|error syslog: slp: 0660-084 [804399280] The SA failed to decode and compute received message: 醊繼Am (-2).

Apr  1 19:04:50 biprd1 daemon:err|error syslog: slp: 0660-065 [804398544] Impossible to parse attribute |^L^Am.

Apr  1 19:04:50 biprd1 daemon:err|error syslog: slp: [804398928] decode_srvreg -- __srv_reg_local failed with rc = 804398924.

Apr  1 19:04:50 biprd1 daemon:err|error syslog: slp: 0660-084 [804399280] The SA failed to decode and compute received message: 醊繼Am (-2).



推荐阅读
  • Redis API
    安装启动最简启动命令行输入验证动态参数启动配置文件启动常用配置通用命令keysbdsize计算key的总数exists判断是否存在delkeyvalue删除指定的keyvalue成 ... [详细]
  • 本文介绍了Oracle数据库中tnsnames.ora文件的作用和配置方法。tnsnames.ora文件在数据库启动过程中会被读取,用于解析LOCAL_LISTENER,并且与侦听无关。文章还提供了配置LOCAL_LISTENER和1522端口的示例,并展示了listener.ora文件的内容。 ... [详细]
  • 本文介绍了Java工具类库Hutool,该工具包封装了对文件、流、加密解密、转码、正则、线程、XML等JDK方法的封装,并提供了各种Util工具类。同时,还介绍了Hutool的组件,包括动态代理、布隆过滤、缓存、定时任务等功能。该工具包可以简化Java代码,提高开发效率。 ... [详细]
  • 《数据结构》学习笔记3——串匹配算法性能评估
    本文主要讨论串匹配算法的性能评估,包括模式匹配、字符种类数量、算法复杂度等内容。通过借助C++中的头文件和库,可以实现对串的匹配操作。其中蛮力算法的复杂度为O(m*n),通过随机取出长度为m的子串作为模式P,在文本T中进行匹配,统计平均复杂度。对于成功和失败的匹配分别进行测试,分析其平均复杂度。详情请参考相关学习资源。 ... [详细]
  • 本文讨论了在数据库打开和关闭状态下,重新命名或移动数据文件和日志文件的情况。针对性能和维护原因,需要将数据库文件移动到不同的磁盘上或重新分配到新的磁盘上的情况,以及在操作系统级别移动或重命名数据文件但未在数据库层进行重命名导致报错的情况。通过三个方面进行讨论。 ... [详细]
  • Linux如何安装Mongodb的详细步骤和注意事项
    本文介绍了Linux如何安装Mongodb的详细步骤和注意事项,同时介绍了Mongodb的特点和优势。Mongodb是一个开源的数据库,适用于各种规模的企业和各类应用程序。它具有灵活的数据模式和高性能的数据读写操作,能够提高企业的敏捷性和可扩展性。文章还提供了Mongodb的下载安装包地址。 ... [详细]
  • Python SQLAlchemy库的使用方法详解
    本文详细介绍了Python中使用SQLAlchemy库的方法。首先对SQLAlchemy进行了简介,包括其定义、适用的数据库类型等。然后讨论了SQLAlchemy提供的两种主要使用模式,即SQL表达式语言和ORM。针对不同的需求,给出了选择哪种模式的建议。最后,介绍了连接数据库的方法,包括创建SQLAlchemy引擎和执行SQL语句的接口。 ... [详细]
  • Oracle优化新常态的五大禁止及其性能隐患
    本文介绍了Oracle优化新常态中的五大禁止措施,包括禁止外键、禁止视图、禁止触发器、禁止存储过程和禁止JOB,并分析了这些禁止措施可能带来的性能隐患。文章还讨论了这些禁止措施在C/S架构和B/S架构中的不同应用情况,并提出了解决方案。 ... [详细]
  • 在Oracle11g以前版本中的的DataGuard物理备用数据库,可以以只读的方式打开数据库,但此时MediaRecovery利用日志进行数据同步的过 ... [详细]
  • 本文介绍了Oracle存储过程的基本语法和写法示例,同时还介绍了已命名的系统异常的产生原因。 ... [详细]
  • 本文讨论了在VMWARE5.1的虚拟服务器Windows Server 2008R2上安装oracle 10g客户端时出现的问题,并提供了解决方法。错误日志显示了异常访问违例,通过分析日志中的问题帧,找到了解决问题的线索。文章详细介绍了解决方法,帮助读者顺利安装oracle 10g客户端。 ... [详细]
  • 本文介绍了在RHEL 7中的系统日志管理和网络管理。系统日志管理包括rsyslog和systemd-journal两种日志服务,分别介绍了它们的特点、配置文件和日志查询方式。网络管理主要介绍了使用nmcli命令查看和配置网络接口的方法,包括查看网卡信息、添加、修改和删除配置文件等操作。 ... [详细]
  • 面试经验分享:华为面试四轮电话面试、一轮笔试、一轮主管视频面试、一轮hr视频面试
    最近有朋友去华为面试,面试经历包括四轮电话面试、一轮笔试、一轮主管视频面试、一轮hr视频面试。80%的人都在第一轮电话面试中失败,因为缺乏基础知识。面试问题涉及 ... [详细]
  • 原理:dismiss再弹出,把dialog设为全局对象。if(dialog!null&&dialog.isShowing()&&!(Activity.)isFinishing()) ... [详细]
  • 本文详细介绍了在Centos7上部署安装zabbix5.0的步骤和注意事项,包括准备工作、获取所需的yum源、关闭防火墙和SELINUX等。提供了一步一步的操作指南,帮助读者顺利完成安装过程。 ... [详细]
author-avatar
跟-着感觉走
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有