OS/Linux2017/02/27 13:00
RHEL7을 VM에서 구동하다 다음과 같이 에러가 발생됨을 확인하였습니다.
 
[ 0.000000] Fast TSC calibration failed.
 
위의 부분은 부팅시 발생되는 부분이며, TSC는 Time Stamp Counter의 약자이더군요.
해결방법은 다음과 같이 하시면 해결하실 수 있습니다.

/etc/default/grub 마지막줄에

GRUB_CMDLINE_LINUX="clocksource=tsc"
위의 항목을 넣어주시고 다음과 같은 명령을 수행하여 주시기 바랍니다.

[root@dev ~]# grub2-mkconfig -o /boot/grub2/grub.cfg
Generating grub configuration file ...
Found linux image: /boot/vmlinuz-3.10.0-123.el7.x86_64
Found initrd image: /boot/initramfs-3.10.0-123.el7.x86_64.img
Found linux image: /boot/vmlinuz-0-rescue-b161999d89d0472890f8a83cc933a9fb
Found initrd image: /boot/initramfs-0-rescue-b161999d89d0472890f8a83cc933a9fb.img
done
[root@dev ~]#
위와 같이 출력되고 나신 뒤부터는 정상적인 부분을 보실 수 있습니다.
위의 에러는 3.x 커널에 vmware 4.x 버젼에서 발생된다고 합니다.

저와 같이 해결을 하시기 바랍니다. 파이팅~!!!
2017/02/27 13:00 2017/02/27 13:00
Posted by JParker
Tags , , ,

Leave your greetings.

OS/Linux2017/02/27 12:57
만일 아래의 명령을 실수로 내렸을 때에 복구 방법은?
chmod 777 * -R
오늘 작업중 유난히 특별 케이스를 보았습니다. 상당히 맨붕이 왔지만... yum 혹은 RPM에서 설치 하셨다면 다음과 같이 패키지에 들어있는 패키지의 퍼미션들을 뽑아서 복구 할 수 있습니다. 기본적인 퍼미션 복구 방법은 다음과 같습니다.
rpm --setperms packagename
위의 명령은 setperms로 packagename에 관련된 파일에 대하여 최초 설치시 퍼미션으로 되돌리는 것입니다. 전체의 퍼미션을 복구 하고 싶을 경우는 다음과 같이 하시면 됩니다.
rpm --setperms -a
이와 관련하여 소유권까지 변경되었다면... 다음 명령어로도 수행이 가능하니 참조하실 수 있겠죠?
rpm --setugids packagename
위의 퍼미션 처럼 동일하게 패키지 최초 설치시 소유권으로 되돌려줍니다. 퍼미션과 소유권을 전체 설정하고 싶으시다면 다음과 같이 하실 수 있습니다.
rpm --setugids --setperms -a
위와 같이 하면 시스템에 설치되었던 패키지 RPM 리스트수대로 chown및 chgrp 그리고 chmod 명령을 수행하여 해당 시스템에 퍼미션들을 수정하게 될 것입니다.
2017/02/27 12:57 2017/02/27 12:57
Posted by JParker
Tags , ,

Leave your greetings.

OS/Linux2017/02/27 12:56
많은 곳에 쓰이는 조건식에 대하여 아래와 같이 나열해봅니다. 조건식의 문자열 비교

조건식

설명

문자열1 == 문자열2 문자열이 일치
문자열1 != 문자열2 문자열이 일치하지 않음
-z 문자열 빈 문자열
-n 문자열 빈 문자열이 아님
문자열 == 패턴 문자열이 패턴에 매치
문자열 != 패턴 문자열이 패턴에 매치하지 않음
조건식의 수치 비교

조건식

설명

수치1 -eq 수치2 수치가 같음
수치1 -ne 수치2 수치가 같지 않음
수치1 -lt 수치2 수치1이 수치2보다 작음
수치1 -le 수치2 수치1이 수치2보다 작거나 같음
수치1 -gt 수치2 수치1일 수치2보다 큼
수치1 -ge 수치2 수치1이 수치2보다 크거나 같음
조건식에 따른 파일검사

조건식

설명

-e 파일명 파일이 존재함
-d 파일명 디렉토리
-h 파일명 심볼릭링크
-f 파일명 일반 파일
조건식에 따른 조건 논리연산

조건식

설명

조건1 && 조건2 양쪽다 성립
조건1 || 조건2 한쪽 혹은 양쪽 다 성립
!조건 조건이 성립하지 않음
true 조건이 언제나 성립
false 조건이 언제나 성립하지 않음
2017/02/27 12:56 2017/02/27 12:56
Posted by JParker

Leave your greetings.

OS/Linux2017/02/27 12:54
OPENSSL POODLE  sslv3 패치가 또 나왔습니다. 얼마전 있었던 heart bleed와 쉘 버그에 이어 푸들 쇼크가 한바탕 몰아쳤습니다. SSL3를 아예 꺼두고 하위 호환성을 위해 TLS_FALLBACK_SCSV 를 사용하라는 가이드 라인이 있습니다. 업계에서는 SSL을 더이상 사용하지 않는 방향으로 가는 듯 합니다.

푸들 관련 기사 및 정보
http://security.stackexchange.com/questions/70719/ssl3-poodle-vulnerability https://blog.mozilla.org/security/2014/10/14/the-poodle-attack-and-the-end-of-ssl-3-0/
(국내 기사)
http://www.zdnet.co.kr/news/news_view.asp?artice_id=20141015090101 http://news.imaso.co.kr/134361

추가로 OpenSSL을 사용하시는 분들은 푸들 보다 (더 심각한) DOS 공격 관련 취약성이 있으니 패치를 권고한다는 문서도 있습니다. 공격으로 인한 메모리 릭이 발생할 수 있는 버그는 2건 입니다.

OpenSSL 패치 보고서.
POODLE 및 메모리 누수  :  http://www.theregister.co.uk/2014/10/15/openssl_ddos_vulns/

지난 수요일 https://www.openssl.org/  에 푸들과 DOS 공격을 위한 네 가지 패치가 올라와 있습니다.
2017/02/27 12:54 2017/02/27 12:54
Posted by JParker
Tags , ,

Leave your greetings.

OS/Linux2017/02/27 12:54
NTP 서버 환경 구축하기

NTP는 Network Time Protocal 의 줄임말로 네트워크로 연결되어 있는 컴퓨터들끼리 시각을 동기화시키는데 사용되는 프로토콜입니다. 서버데몬 실행시 Port는 UDP 23번을 사용합니다.  방화벽에 막혀있으면 서비스가 불가능하겠죠?

NTP서버및클라이언트 개념은 /etc/conf파일을 수정하기 나름입니다. 해당구축 플랫폼의 서버 3대의 시간을 동기화시키기 위해
1번 서버에 NTP설정을 하고 2번,3번 서버가 1번으로 바라보도록 NTP설정을 해주면 됩니다.

결국에 같은설정될 수도 아닐수도 있겠죠 그리고 굳이 동기화 시키지 않고 한번만 혹은 때때로 하실경우엔 ntpdate [ServerIP]를 사용하시면 됩니다. 그러나 이 경우는 rdate와 별반차이가 없기에 윗부분만 설명드리도록 하겠습니다.

1.NTP 설치
root# yum -y install ntp

2. NTP구성
(굵게 표시한부분만 따라오세요)
root# vi /etc/ntp.conf
# Permit time synchronization with our time source, but do not
# permit the source to query or modify the service on this system.
restrict default kod nomodify notrap nopeer noquery
# Permit all access over the loopback interface. This could
# be tightened as well, but to do so would effect some of
# the administrative functions.
restrict 127.0.0.1
restrict -6 ::1
# Hosts on local network are less restricted.
#restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap
# Use public servers from the pool.ntp.org project.
# Please consider joining the pool (http://www.pool.ntp.org/join.html).
#broadcast 192.168.1.255 key 42 # broadcast server
#broadcastclient # broadcast client
broadcast 224.0.1.1 key 42 # multicast server
#multicastclient 224.0.1.1 # multicast client
#manycastserver 239.255.254.254 # manycast server
#manycastclient 239.255.254.254 key 42 # manycast client
#NTP Server List (Start)
server time.bora.net iburst
server time.nuri.net iburst
server ntp1.gngidc.net iburst
server ntp2.gngidc.net ibust
##NTP Server List (END)
# Undisciplined Local Clock. This is a fake driver intended for backup
# and when no outside source of synchronized time is available.
server 127.127.1.0
fudge 127.127.1.0 stratum 10
# Drift file. Put this in a directory which the daemon can write to.
# No symbolic links allowed, either, since the daemon updates the file
# by creating a temporary in the same directory and then rename()'ing
# it to the file.
driftfile /var/lib/ntp/drift
# Key file containing the keys and key identifiers used when operating
# with symmetric key cryptography.
keys /etc/ntp/keys
# Specify the key identifiers which are trusted.
#trustedkey 4 8 42
# Specify the key identifier to use with the ntpdc utility.
#requestkey 8
# Specify the key identifier to use with the ntpq utility.
#controlkey 8
restrict None mask 255.255.255.255 nomodify notrap noquery
:wq (vi 나오기)

3. NTP 데몬 가동
root# service ntpd start

4. 클라이언트의 경우
방법1. 무조건 되는 방법 굵게 표시된 server를  다 삭제하시고 server 10.1.1.1로 변경하는 방법이 있습니다.
방법2. 같은 네트워크 대역시 추천드립니다. (Boardcast, Multicast, Manycast 셋중택일)
root# cat /dev/null > /etc/ntp.conf
root# cat >> /etc/ntp.conf << EOF
server 10.1.1.1
multicastclient 224.0.1.1
EOF

*확인방법 3가지(Process, Netstat, ntpq)
1. Process 확인
 root# ps -ef| grep ntp 
ntp 27421 1 0 13:02 ? 00:00:00 ntpd -u ntp:ntp -p /var/run/ntpd.pid
2. netstat 확인

root# netstat -anp | grep ntp
udp 0 0 10.1.1.1:123 0.0.0.0:* 27421/ntpd
3. net 상태확인 (루트만가능 : 구동 이후 2~3분 경과시 출력됨.)
root # netq -p 
remote refid st t when poll reach delay offset jitter
=================================================================
10.1.1.1 211.115.194.21 3 u 11 64 3 0.311 37.229 8.749
2017/02/27 12:54 2017/02/27 12:54
Posted by JParker
Tags , ,

Leave your greetings.

OS/Linux2017/02/27 12:52
리눅스를 처음 설치시 많이 당혹스럽다는 부분이 파티션 구성입니다. 허나 리눅스 구성시 다음과 같이 설정하시면 큰 무리 없이 설치가 가능하십니다. 리눅스 기본 설치 파티션 구성은 다음과 같습니다.
/boot : 부팅을 담당하는 부팅이미지가 들어있는 파티션입니다.
SWAP : 메모리 고갈시 하드디스크를 통한 메모리 저장소입니다.
/ : 파티션의 최상의 디렉토리 입니다.
위의 3가지가 기본적인 구성입니다. 예전에는 fdisk로 직접적인 경로를 설정하였지만, 해당 볼륨의 크기 변동이 힘들었던 점이 있습니다.  ex) /dev/sda3, /dev/sdb1... 허나 요즘은 LVM을 이용하여 볼륨 크기 조절을 마음대로 하실 수 있습니다. 따라서, 설치시 다음과 같이 설정하시면 향후 업그레이드 및 크기 조절이 가능하게 됩니다.
파티션 및 파일 타입 설명
/boot (ext4) 부팅의 경우 가상의 Extend가 되지 않으므로 직접적인 경로를 사용하게됩니다.
LVM Extend ( /boot를 제외한 남은 용량을 전체로 설정합니다. 이때, vg이름 설정후 진행하시면 됩니다.)
SWAP (LVM - swap) LVM 파티션으로 구성합니다. (lv_swap)
/ (LVM - ext4) LVM 파티션으로 구성합니다. (lv_root)
위와 같이 설정이 되었을 경우 다음과 같은 의문점이 생기실 겁니다.
사용자 삽입 이미지
1. LVM 에서 VG와 LV의 차이는 무엇인지..
Physical 볼륨은 말 그대로 물리 디스크를 뜻합니다. 물리 디스크를 합쳐서 만든 것이 볼륨 그룹 (VG)이며 ,  그안에서 세세히 나누어지는 것이 가상볼륨(LV)입니다. 따라서, 추후 추가적으로 구성시 위와 같이 설정을 하였을 경우 볼륨 조절이 가능한 것입니다. 용량은 선택적이며, 저의 경우 다음과 같은 용량으로 기준합니다.
 /boot : 500M (ext4)
SWAP : 링크참조
/ : 남은 용량 모두

기존 리눅스 시스템에는 다음과 같이 파티셔닝을 하였지만, 근래에는 파티셔닝을 간단하게 바뀌고 있습니다. 이유는 예전의 경우 디스크 용량이 적어 디스크 FULL 현상이 자주 발생하고, FULL일 경우 시스템에 접속도 되지 않는 현상이 발생되어 파티셔닝을 해 주었던 것입니다. 허나, 근래의 디스크 크기는 예전에 비하여 엄청난 발전이 되어 FULL 현상이 없으므로, 이에 대한 파티셔닝은 간단히 하셔도 된다고 생각하시면 될 듯 합니다. 보안적인 측면에서 fstab에 보안설정인 nosuid, noexec, nodev등을 넣어야 하지만, 이또한 mounting 옵션으로 설정이 가능하므로 굳이 디스크 파티셔닝을 따로 세세히 넣어줄 이유가 없답니다. 더 궁금하신 사항이 있다면 언제든 댓글 부탁드리겠습니다. 감사합니다.
2017/02/27 12:52 2017/02/27 12:52
Posted by JParker

Leave your greetings.

OS/Linux2017/02/27 12:52
SWAP의 경우 예전 메모리가 모자르던 시절에는 약 메모리의 2배를 사용하였습니다. 현재에도 국내 업체의 경우 약 메모리의 2배로 설정하는 경우를 종종 보게 되었습니다. 기존의 메모리 2배의 경우는 1G 이하 시절에 사용하던 것으로 현재와는 맞지 않습니다. 따라서 다음과 같이 설정하는 것이 권장사항이라 할 수 있습니다.

Amount of RAM in the System Recommended Amount of Swap Space
4GB of RAM or less a minimum of 2GB of swap space
4GB to 16GB of RAM a minimum of 4GB of swap space
16GB to 64GB of RAM a minimum of 8GB of swap space
64GB to 256GB of RAM a minimum of 16GB of swap space
256GB to 512GB of RAM a minimum of 32GB of swap space

다음 사이트에서도 권장을 하고 있습니다. 관련 사이트 http://jmnote.com http://redhat.com
2017/02/27 12:52 2017/02/27 12:52
Posted by JParker
Tags , ,

Leave your greetings.

OS/Linux2017/02/27 12:51
안녕하세요? 오랜만에 글을 적습니다.
IBM장비에 RHCS를 구성시 IMM을 이용하려면 해당 포트에 대하여 enable을 해야 합니다.
노트북으로 다이렉트로 IMM 포트를 접속시키고 다음과 같이 작업을 하시면 됩니다.
노트북 아이피 : 192.168.70.124 / 255.255.255.0 (Gateway X )
브라우져로 https://192.168.70.125 로 접속하시면 IMM 관리자 포트를 접속하실 수 있습니다.
아이디는 USERID 패스워드는 PASSW0RD입니다. (0은 숫자 0입니다.)
이후 서버에서 작업시 중요한 점 한가지. 
IMM은 네트워크 디바이스중 USB0에 대하여 enabled하지 않으면 동작되지 않습니다.
따라서, 해당 IMM을 위하여 usb0를 ONBOOT = yes로 하여 동작하게 하여 주시고 BOOTPROTO는 DHCP로
설정을 하여 주시기 바랍니다.
즐거운 리눅싱 되시기 바라며...
2017/02/27 12:51 2017/02/27 12:51
Posted by JParker
Tags , ,

Leave your greetings.

OS/Linux2017/02/27 12:50
CentOS 의 /etc/sysctl.conf 파일에 아래와 같이 기술한 후, 재부팅하면 IPv6 가 비활성화된다.
net.ipv6.conf.all.disable_ipv6 = 1
net.ipv6.conf.default.disable_ipv6 = 1
적용 방법은 sysctl -p 명령을 이용하면 된다.
2017/02/27 12:50 2017/02/27 12:50
Posted by JParker
Tags , ,

Leave your greetings.

OS/Linux2017/02/27 12:50
일을 하다보니 여러 환경에서 신기한 작업(?)들을 많이 하게 됩니다. 이번에는 DRBD 환경 구축이 필요하여 아래와 같이 구성하였습니다. 필요하신 분들은 아래의 자료를 참고하여 구축해보시기 바랍니다. 문서의 저작권은 http://root.so, http://jaehun.org 를 운영하는 Jaehun, Park <jaehun@me.com>에게 있으므로, 출처를 반드시 밝혀주시기 바랍니다. 감사합니다.

구성 환경

  • RHEL 6.4 (64bit)
  • DRBD 8.4.0

구성 요건

  •  단일 Primary 모드

구성 개요

  1. DRBD 설치
  2. DRBD 설정파일 작성
  3. DRBD 기동
  4. 데이터 동기화 확인

서버 구성

Host Name   Address
node1 master 192.168.11.151
node2 backup 192.168.11.152
  Virtual IP 192.168.11.150

작업 내용

DRBB를 빌드 하기 위하여 필요한 패키지 설치
$ sudo yum install -y gcc make automake autoconf flex rpm-build kernel-devel \
  libxslt fakeroot
rpmbuild 구축에 앞서 필요로 하는 디렉토리 구조를 생성.
$ mkdir -p /home/help/rpmbuild/{BUILD,BUILDROOT,RPMS,SOURCES,SPECS,SRPMS}
소스 다운로드 (안정버전 drbd 8.4.0)
$ curl -O http://oss.linbit.com/drbd/8.4/drbd-8.4.0.tar.gz
다운로드한 소스를 풉니다.
$ tar zxvf drbd-8.4.0.tar.gz

configure스크립트를 실행.
$ cd drbd-8.4.0
$ ./configure
fakeroot를 이용하여 make를 실행합니다. fakeroot를 사용하는 이유는 RPM을 빌드하기 위함이며,  root권한이기 때문에 fakeroot가 root권한인 것 같이 표현합니다.
$ fakeroot make rpm km-rpm
아무이상없이 빌드가 완성되면 , 아래rpm이 작성된다.
$ ls -1 /home/help/rpmbuild/RPMS/x86_64/
drbd-8.4.0-1.el6.x86_64.rpm
drbd-bash-completion-8.4.0-1.el6.x86_64.rpm
drbd-heartbeat-8.4.0-1.el6.x86_64.rpm
drbd-km-2.6.32_71.el6.x86_64-8.4.0-1.el6.x86_64.rpm
drbd-pacemaker-8.4.0-1.el6.x86_64.rpm
drbd-udev-8.4.0-1.el6.x86_64.rpm
drbd-utils-8.4.0-1.el6.x86_64.rpm
drbd-xen-8.4.0-1.el6.x86_64.rpm
RPM 빌드 완료후 필요한 것은 drbd-utils와 drbd-km입니다. 물론 필요에 따라 해당 패키지를 설치 하시면 됩니다.
$ sudo rpm -ivh \
 /home/help/rpmbuild/RPMS/i386/drbd-utils-8.4.0-1.el6.x86_64.rpm \
 /home/help/rpmbuild/RPMS/i386/drbd-km-2.6.32_71.el6.x86_64-8.4.0-1.el6.x86_64.rpm
커널 모듈에 DRBD를 인식 시킵니다.
$ lsmod | grep drbd
$ sudo modprobe drbd
$ lsmod | grep drbd
drbd                  274063  0
libcrc32c                815  1 drbd
” /etc/init. d/drbd start "실행에 modprobe drbd가 실행되므로, 여기에서는 modprobe 명령어로 커널 모듈을 정상적으로 등록 할 수 있는 것을 확인하는 것입니다. 부팅시 자동으로 등록될 수 있도록 아래와 같이 서비스 등록을 시켜줍니다.
$ chkconfig --list drbd
drbd            0:off   1:off   2:on    3:on    4:on    5:on    6:off

Device File 준비

본인의 경우 LVM으로 각각 100G, 75G 두개의 파티션을 준비했습니다. lv_data : 100G , lv_log : 75G

DRBD 설정

/etc/hosts에 호스트명을 등록해줍니다. 등록을 하는 이유는 config에서 IP를 지정하지만 호스트명을 IP로 변환하는 것을 실패하면 동작되지 않는 문제때문입니다.
$ sudo vi /etc/hosts
> 192.168.11.151 node1
> 192.168.11.152 node2

다음은 DRBD 설정 파일을 수정합니다. 설정 파일은 항상 res로 인식하도록 하고 있습니다.
disk 부분이 미리 준비해둔 LVM 파티션입니다. Volum은 node1과 node2에 따라 틀리므로 주의하시기 바랍니다.
/etc/drbd.d/data.res
resource data {
  protocol C;
  volume 0 {
    device      /dev/drbd0;
    disk        /dev/vg_cs1/data;
    meta-disk   internal;
  }
  volume 1 {
    device      /dev/drbd1;
    disk        /dev/vg_cs1/log;
    meta-disk   internal;
  }
  on node1 {
    address 10.10.10.11:7801;
  }
  on node2 {
    address 10.10.10.12:7801;
  }
}
DRBD 디바이스를 초기화합니다.
$ sudo drbdadm create-md data
Writing meta data...
initializing activity log
NOT initializing bitmap
New drbd meta data block successfully created.
success
※주의: iptables가 구동중일 경우 DRBD 통신이 원활히 동작되지 않을 수 있으니 참고 바랍니다. DRBD 동작.
$ sudo /etc/init.d/drbd start
Starting DRBD resources: [
     create res: data
   prepare disk: data
    adjust disk: data
     adjust net: data
]
.....
DRBD를 스타트하면 /proc/drbd가 생성됩니다.
$ cat /proc/drbd
version: 8.4.0 (api:1/proto:86-100)
GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by root@node1, 2013-10-14 15:10:50
 0: cs:Connected ro:Secondary/Secondary ds:Inconsistent/Inconsistent C r-----
    ns:0 nr:106628836 dw:106628836 dr:0 al:0 bm:6400 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
 1: cs:Connected ro:Secondary/Secondary ds:Inconsistent/Inconsistent C r-----
    ns:0 nr:78640764 dw:78640764 dr:0 al:0 bm:4800 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
이 때, 어느 쪽도 Primary가 아닌 Secondary로 동작되는 것을 알 수 있습니다.

데이터 동기화 확인

Primary에서 파일을 작성하고,  Secondary에 데이터 동기화가 이루어지는 것을 확인합니다.

node1: (secondary→primary)

node1을 primary로 강제 변경합니다.
$ sudo drbdadm primary --force data
Primary로부터 Secondary에  동기화 처리가 시작되며, 용량에 따라 동기화 시간이 틀려질 수 있습니다. 저의 경우 약 1시간정도 걸렸습니다.
$ cat /proc/drbd
version: 8.4.0 (api:1/proto:86-100)
GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by centos@centos, 2011-11-08 16:16:36
 0: cs:SyncSource ro:Primary/Secondary ds:UpToDate/Inconsistent C r-----
    ns:2664 nr:0 dw:0 dr:104855036 al:0 bm:0 lo:0 pe:3 ua:3 ap:0 ep:1 wo:b oos:128600
        [>....................] sync'ed:  3.2% (128600/104855036)K
        finish: 0:00:45 speed: 2,432 (2,432) K/sec
 1: cs:Connected ro:Primary/Secondary ds:UpToDate/UpToDate C r-----
    ns:78640764 nr:0 dw:0 dr:78641436 al:0 bm:4800 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
$ cat /proc/drbd
version: 8.4.0 (api:1/proto:86-100)
GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by centos@centos, 2011-11-08 16:16:36
 0: cs:Connected ro:Primary/Secondary ds:UpToDate/UpToDate C r-----
    ns:131032 nr:0 dw:0 dr:131696 al:0 bm:8 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
 1: cs:Connected ro:Primary/Secondary ds:UpToDate/UpToDate C r-----
    ns:78640764 nr:0 dw:0 dr:78641436 al:0 bm:4800 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
DRBD 디바이스를 확인해 보시면 설정한 대로 /dev/drbd0과 /dev/drbd1이 생성되었음을 알게 될 것입니다.
$ ls -la /dev/drbd0
brw-rw---- 1 root disk 147, 0 Nov  8 17:19 /dev/drbd0
기존 사용하던 디스크처럼 동일하게 DRBD 디바이스를 포맷하고, 마운트 하면 사용이 가능합니다.
$ sudo mkfs.ext4 /dev/drbd0
$ sudo mkfs.ext4 /dev/drbd1
$ sudo mkdir /data
$ sudo mount -t ext4 /dev/drbd0 /data
$ sudo mkdir /data/log
$ sudo mount -t ext4 /dev/drbd1 /data/log
마운트후 정상적으로 마운트가 되었는지 확인합니다.
$ ls -la /data
total 18
drwxr-xr-x   4 root root  4096 2013-10-14 18:12 .
dr-xr-xr-x. 28 root root  4096 2013-10-14 16:27 ..
drwxr-xr-x   3 root root  4096 2013-10-14 18:13 log
drwx------   2 root root 16384 2013-10-14 17:54 lost+found

primary·secondary간 데이터 동기되는 것을 확인하기 위해서, 파일을 생성해봅니다.
$ sudo touch /data/test.txt
$ ls -la /data/
total 28
drwxr-xr-x   4 root root  4096 2013-10-14 18:15 .
dr-xr-xr-x. 28 root root  4096 2013-10-14 16:27 ..
drwxr-xr-x   3 root root  4096 2013-10-14 18:13 log
drwx------   2 root root 16384 2013-10-14 17:54 lost+found
-rw-r--r--   1 root root     0 2013-10-14 18:15 test.txt

node1: (primary→secondary)

DRBD가 사용중이므로 secondary로 변경할 수 없으므로, 디바이스를 umount 합니다.
$ sudo umount /data/log
$ sudo umount /dat
DRBD의 모드를 Primary에서 Secondary모드로 변경합니다.
$ sudo drbdadm secondary data
$ cat /proc/drbd
version: 8.4.0 (api:1/proto:86-100)
GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by root@node1, 2013-10-14 15:10:50
 0: cs:Connected ro:Secondary/Secondary ds:UpToDate/UpToDate C r-----
    ns:106628984 nr:0 dw:1774620 dr:104856149 al:498 bm:6400 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
 1: cs:Connected ro:Secondary/Secondary ds:UpToDate/UpToDate C r-----
    ns:80005452 nr:0 dw:1364688 dr:78642521 al:384 bm:4800 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0

위와 같이 되었으므로, 기존 Secondary가 Primary로 변경할 수 있는 상태가 됩니다.

node2: (secondary→primary)

node2의 DRBD모드를 Primary로 변경합니다.
$ sudo drbdadm primary data
/proc/drbd에서 Primary가 되었는지 확인합니다.
$ cat /proc/drbd
version: 8.4.0 (api:1/proto:86-100)
GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by root@node1, 2013-10-14 15:10:50
 0: cs:Connected ro:Primary/Secondary ds:UpToDate/UpToDate C r-----
    ns:0 nr:106628984 dw:106628984 dr:672 al:0 bm:6400 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
 1: cs:Connected ro:Primary/Secondary ds:UpToDate/UpToDate C r-----
    ns:0 nr:80005452 dw:80005452 dr:672 al:0 bm:4800 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
DRBD 디바이스의 내용을 확인하기위하여, 볼륨을 마운트합니다.
$ sudo mkdir /data
$ sudo mount -t ext4 /dev/drbd0 /data/
$ sudo mount -t ext4 /dev/drbd1 /data/log
mount된 디렉토리에서 node1에서 작성하였던 test.txt가 존재하는지를 확인합니다.

$ ls -la /data/ total 20 drwxr-xr-x 3 root root 1024 Nov 8 17:23 . drwxr-xr-x. 3 root root 4096 Nov 8 17:25 .. drwxr-xr-x 3 root root  4096 2013-10-14 18:13 log drwx------ 2 root root 16384 2013-10-14 17:54 lost+found -rw-r--r-- 1 root root     0 2013-10-14 18:15 test.txt

node2: (primary→secondary)

해당 /data/log와 /data 디렉토리를 umount 하고, secondary로 모드를 변경합니다.
$ sudo umount /data/log
$ sudo umount /data
$ sudo drbdadm secondary data
/dev/drbd에서 secondary로 모드가 변경되었는지 확인합니다.
$ cat /proc/drbd
version: 8.4.0 (api:1/proto:86-100)
GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by root@node1, 2013-10-14 15:10:50
 0: cs:Connected ro:Secondary/Secondary ds:UpToDate/UpToDate C r-----
    ns:8 nr:106628984 dw:106628992 dr:1385 al:1 bm:6400 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
 1: cs:Connected ro:Secondary/Secondary ds:UpToDate/UpToDate C r-----
    ns:8 nr:80005452 dw:80005460 dr:1373 al:1 bm:4800 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
이것으로 node1, node2 둘다 secondary로 동작되고 있는 상태입니다. 추후 RHCS나 혹은 heartbeat를 이용하여 해당 클러스터로 묶어서 구동시키실 수 있습니다. 이로서 DRBD 구축에 대한 글을 마치겠습니다. 감사합니다.
2017/02/27 12:50 2017/02/27 12:50
Posted by JParker
Tags ,

Leave your greetings.