구름 속 지식

핸드폰 또는 태블릿으로 내 서버 상태가 이상없는지 웹브라우저에서 Ping으로 확인할 수 있도록 프로그램을 짜 보았다.

<?php
$now=date("Y-m-d-H:i:s");
$host=array(
        '공인IP' => 'hostname',
        '공인IP' => 'hostname'
);

foreach($host as $ip => $hostname) {

$str = exec("ping -c 2 $ip");
if ($result == 0){
  echo "$ip ping <font size=5> succeeded</font> - $hostname <br />";
}else{
  echo "$ip ping <font size=5; color=red>failed</font> - $hostname <br />";
}
}

echo("<br /> <font size=14> update time : $now </font> <br />");
?>

테스트 결과 ping count가 2이상이고 등록한 서버IP가 많다면 웹 브라우저 출력시 시간이 다소 걸리니
이점 참고해야 됩니다.

CPU 사용량 스크립트와 같이 메모리 부하가 일어났을 때,
어떤 프로세스가 메모리 사용이 많았는지 메일 발송이 되는 스크립트입니다.

#!/bin/bash
s_time=$(date +%Y-%m-%d' '%H:%M:%S)

while true; do

#memory usage
TOTAL=`free | awk '/^Mem:/    { printf( "%s\n", $2 ); }'`
USED=`free | awk '/^Mem:/    { printf( "%s\n", $3 ); }'`
FREE=`free | awk '/^Mem:/    { printf( "%s\n", $4 ); }'`
BUFFERS=`free | awk '/^Mem:/    { printf( "%s\n", $6 ); }'`
CACHED=`free | awk '/^Mem:/    { printf( "%s\n", $7 ); }'`

#cat /proc/meminfo | egrep 'MemTotal|MemFree|Buffers|Cached' | grep -v 'SwapCached' | awk '{print $2}' > $TMP_DIR/memory.$$

usage=$(expr $FREE + $BUFFERS + $CACHED)
used=`expr $TOTAL - $FREE - $BUFFERS - $CACHED`
#mem_usage=`echo "$used / $TOTAL * 100"|bc -l`
#mem_usage=$(echo "scale=2; $used/$TOTAL*100"|bc -l)
let "mem_usage=$used*100/$TOTAL"

if [ "$mem_usage" -ge 90 ]; then
 Process=`/bin/ps -eo pmem,pcpu,rss,vsize,args | /bin/sort -k 1 -r | /usr/bin/head -n 20`
 echo -e "$(hostname) as on $s_time \n $Process\n" | mail -s "Alert: Almost out of memory space $mem_usage%" root@test.com
fi

  # Wait before checking again.
  sleep 300

done

CPU 사용량 체크 명령어는 top ,vmstat,sar 등등 많은 것이 있지만
CPU 부하가 일어났을 때, 어떤 프로세스때문인지는 알 수가 없다..따라서 필자는 아래와 같이 CPU부하가 일어났을 때, CPU부하가 높은 순서를 메일로 발송되도록 스크립트를 작성해 보았다.

<cpu-usage.sh>

#!/bin/bash
s_time=$(date +%Y-%m-%d' '%H:%M:%S)
PREV_TOTAL=0
PREV_USER=0

while true; do
#CPU 전체 사용량을 cat으로 추출한다.
  CPU=(`cat /proc/stat | grep '^cpu '`) # Get the total CPU statistics.
  unset CPU[0]                          # Discard the "cpu" prefix.
  USER=${CPU[1]}                        # Get the idle CPU time.

  # Calculate the total CPU time.
  TOTAL=0
  for VALUE in "${CPU[@]}"; do
    let "TOTAL=$TOTAL+$VALUE"
  done

  # Calculate the CPU usage since we last checked.
  let "DIFF_USER=$USER-$PREV_USER"
  let "DIFF_TOTAL=$TOTAL-$PREV_TOTAL"
  let "DIFF_USAGE=$DIFF_USER*100/$DIFF_TOTAL"
  #echo -en "CPU: $DIFF_USAGE%  \n"

  # Remember the total and idle CPU times for the next check.
  PREV_TOTAL="$TOTAL"
  PREV_USER="$USER"

  if [ "$DIFF_USAGE" -ge 20 ]; then
  #Process=`/bin/ps -eo pmem,pcpu,rss,vsize,args | /bin/sort -k 2 -r | /usr/bin/head -n 20`
#cpu부하가 일어났을 때, 어떤 프로세스때문에 부하가 일어났는지 프로세스 상태를 메일로 발송해 준다.
  Process=`/bin/ps -eo ppid,user,bsdstart,bsdtime,%mem,%cpu,args --sort=-%cpu | /usr/bin/head -n 20`
  echo -e "$(hostname) as on $s_time \n $Process\n" | mail -s "Alert: Almost out of cpu usage $DIFF_USAGE%" root@test.com
  fi

  # Wait before checking again.(5분마다 해당 스크립트가 작동하도록 300초 설정)
  sleep 300
done

위와 같이 스크립트를 작성하였다면, 백그라운드에서 해당 스크립트가 작동되록 설정해 준다.

#백그라운드 실행
sh <root directory>/cpu-usage.sh &

#프로세스가 잘 운영되고 있는지 확인
ps -ef | grep cpu

#stress 설치 및 부하 테스트

stress --cpu 8 --io 4 --vm 2 --vm-bytes 128M --timeout 400s

Site : http://weather.ou.edu/~apw/projects/stress/

출처 : http://happybruce.tistory.com

쉘 스크립트를 만들때,  가장 첫 라인에 #!/bin/bash 를 왜 써야 하는지에 대하여 알아 보도록 하겠습니다.

쉘 스크립트의 가장 첫 라인에  !/bain/bash 를 쓰게 됨으로 해서, 내가 사용 하려는 명령어 해석기가 bash 쉘 임을 미리 알려주는 것입니다. 일반적으로 스크립트에서 #는 주석기호이지만, 첫 라인의 #!/bin/bash 에서의 #은 주석기호가 아닙니다.

스크립트의 가장 첫 라인에 있는 #! 은 스크립트의 제일 앞에서 이 파일이 어떤 명령어 해석기의 명령어 집합인지를 시스템에게 알려주는 역할을 합니다.

#! 은 두 바이트의 "매직넘버"("magic number")로서, 실행 가능한 쉘 스크립트라는 것을 나타내는 특별한 표시자 입니다.

#! 바로 뒤에 나오는 것은 경로명으로, 스크립트에 들어있는 명령어들을 해석할 프로그램의 위치를 나타내는데 그 프로그램이 쉘인지, 프로그램 언어인지, 유틸리티인지를 나타냅니다. 이 명령어 해석기가 주석은 무시하면서 스크립트의 첫 번째 줄부터 명령어들을 실행시킵니다.

거의 대부분의 상업용 유닉스 및 리눅스 에서 기본 본쉘인 #!/bin/sh을 쓰면 비록 Bash 만 가지고 있는 몇몇 기능들을 못 쓰게 되겠지만 리눅스가 아닌 다른 머신에 쉽게 포팅 할 수 있게 해 줍니다. (이렇게 작성된 스크립트는 POSIX sh 표준을 따르게 됩니다. )
"#!" 뒤에 나오는 경로는 정확히 Full PATH를 기록 해야 합니다.

만약 PATH를 잘못 적게 되면, 스크립트를 돌렸을 때 거의 대부분 "Command not found"라는 에러 메세지만 보게 될 것입니다.

이상으로 쉘 스크립트 처음에 왜 "#!/bin/bash"를 반드시 써야만 하는지에 대하여 알아 보았습니다.

Mysql 운영시에 필요한 툴들을 정리해 보았습니다. 유용한 툴이니 적용해보고 유용하다고 생각되는 거 실서버에 적용하여 효율적인 업무에 도움이 되세요.
 

maatkit : master/master 장비의 replication에 유용한 툴이고, 테이블 동기화와 관련된 툴임 
mysqlreport : Mysql 서버의 통계 정보를 보는데 도움을 주는 툴임
querysniffer (querybench/queryparser) : 로깅 정보를 통해 mysql서버의 리스타트 없이 쿼리 정보를 볼 수 있음
mysqlsla :  쿼리 분석 도구(응답시간이 긴 쿼리 분석에 용이)
mysqlidchck : Mysql 서버에 사용되지 않는 인덱스 정보 제공
innodb-recovery : InnoDB tablespaces를 사용중이라면 손상된 데이터를 복구해 줌
Dstat : 실시간으로 Mysql정보를 제공

#yum install dstat
Loading "installonlyn" plugin
Setting up Install Process
Setting up repositories
Reading repository metadata in from local files
Parsing package install arguments
Resolving Dependencies
--> Populating transaction set with selected packages. Please wait.
---> Package dstat.noarch 0:0.6.6-3.el5_4.1 set to be updated
--> Running transaction check

Dependencies Resolved

=============================================================================
 Package                 Arch       Version          Repository        Size
=============================================================================
Installing:
 dstat                   noarch     0.6.6-3.el5_4.1  base              106 k

Transaction Summary
=============================================================================
Install      1 Package(s)        
Update       0 Package(s)        
Remove       0 Package(s)        

Total download size: 106 k
Is this ok [y/N]: y
Downloading Packages:
Running Transaction Test
Finished Transaction Test
Transaction Test Succeeded
Running Transaction
  Installing: dstat                        ######################### [1/1]
error: unpacking of archive failed on file /usr/bin/dstat;4ed72809: cpio: open

Installed: dstat.noarch 0:0.6.6-3.el5_4.1
Complete!

※complete가 나왔지만, error: unpacking of archive failed on file /usr/bin/dstat;4ed72809: cpio: open 발생되어
패키지 설치가 안되었다. 이런 경우는 /usr/bin 디렉토리가 속성 잠금 상태일 것이다.

확인해 보자.
#lsattr /usr/ | more

----i-----I-- /usr/bin
역시 잠금상태이다.
#chattr -i /usr/bin 잠금 해제
#lsattr /usr/ | more
----------I-- /usr/bin

다시 한번, yum install

# yum install dstat
Loading "installonlyn" plugin
Setting up Install Process
Setting up repositories
Reading repository metadata in from local files
Parsing package install arguments
Resolving Dependencies
--> Populating transaction set with selected packages. Please wait.
---> Package dstat.noarch 0:0.6.6-3.el5_4.1 set to be updated
--> Running transaction check

Dependencies Resolved

=============================================================================
 Package                 Arch       Version          Repository        Size
=============================================================================
Installing:
 dstat                   noarch     0.6.6-3.el5_4.1  base              106 k

Transaction Summary
=============================================================================
Install      1 Package(s)        
Update       0 Package(s)        
Remove       0 Package(s)        

Total download size: 106 k
Is this ok [y/N]: y
Downloading Packages:
Running Transaction Test
Finished Transaction Test
Transaction Test Succeeded
Running Transaction
  Installing: dstat                        ######################### [1/1]

Installed: dstat.noarch 0:0.6.6-3.el5_4.1
Complete!

error: unpacking of archive failed on file /usr/bin/dstat;4ed72809: cpio: open 에러 없이
정상적으로 complete 되었다.