Versions Compared

Key

  • This line was added.
  • This line was removed.
  • Formatting was changed.

...

리소스를 생성하고 삭제하기 까지의 일반적인 관리작업에 대해 설명합니다.

리소스 생성

리소스 생성은 앞 단락에서 절에서 설명한 리소스 구성파일을 준비하는 작업입니다. 구성파일을 작성했다면 리소스를 생성한 것으로 간주합니다. bsr 에서는 이 과정을 사용자가 수작업으로 수행해야 합니다. 하며 이를 위한 별도의 CLI 나 API 제공 되지는 되지 않습니다.

한번 구성파일이 작성되어 리소스가 생성되면 구성파일이 삭제 되기 전 까지는 해당 리소스가 노드에 계속 생성된 상태로 존재합니다. 따라서 복제 리소스의 생명주기는 구성파일의 생명주기와 같습니다유지되므로 구성파일에 대한 적절한 관리가 필요합니다.

메타 초기화

리소스가 생성되면 최초 기동을 위해 메타디스크를 초기화 해야 합니다. 메타 디스크의 초기화는 다음의 명령으로 수행합니다.

Code Block
>bsradm create-md r0
initializing activity log
NOT initializing bitmap
Writing meta data...
New drbd meta data block successfully created.

메타초기화는 복제를 위해 필요한 메타디스크의 부가 정보를 초기화하는 작업이기 때문에 정보들을 메타디스크 상에서 초기화하는 작업으로 리소스를 최초 기동하기 전 한번만 수행하면 됩니다. 만일 메타를 초기화 하지 않고 리소스를 기동할 경우 비정상적인 운영상황이 되므로 주의해야 합니다.

...

bsradm up 명령을 통해 리소스를 기동할 수 있습니다. up 은 내부적으로 다음의 과정을 순차적으로 수행합니다수행하여 리소스를 기동합니다.

  • 리소스 메모리를 리소스를 위한 메모리 등의 자원을 할당합니다.

  • 복제 볼륨을 적재합니다적재하고 구성파일에 지정된 옵션들을 리소스에 설정합니다.

  • 구성파일의 옵션들을 설정하고 상대편 노드의 리소스와 네트워크를 통해 상대편 노드와 연결합니다.

Code Block
>bsradm up r0
>bsradm status r0
r0 role:Secondary
  disk:Inconsistent
  node0 role:Secondary
    peer-disk:Inconsistent
Info

bsr 의 상태는 bsradm status 명령으로 조회할 수 있습니다. 이와 관련한 자세한 내용은 조회의 내용을 참고하세요.

리소스 할당

리소스에 대한 메모리를 할당하여 인스턴스화 리소스를 위한 메모리를 할당하고 초기화 합니다.

볼륨 적재

리소스에 구성된 볼륨을 복제볼륨으로 적재(attach)하고 메타디스크의 정보를 조회합니다조회하여 로드하고 구성파일에 설정된 옵션들을 적용합니다. 볼륨의 적재는 별도의 attach 명령으로도 개별 수행할 수 있습니다.

...

적재된 볼륨을 피어노드의 리소스 볼륨과 연결합니다. 연결이 수립되면 복제 연결 상태는 Established 가 되고 복제를 시작하기 위한 대기상태가 됩니다. 만일 피어 노드가 연결을 아직 준비하고 있지 않았다면 로컬의 리소스는 연결 시도 중(Connecting) 상태를 유지합니다. 복제 연결은 개별 connect 명령으로도 수행할 수 있습니다.

...

리소스는 Primary 또는 Secondary 역할을 가질 수 있습니다. Primary 역할의 리소스는 볼륨 장치에 제한 없이 접근하여 데이터를 읽고 쓸 수 있지만 Secondary 역할의 리소스는 사용자 계층으로부터의 볼륨장치로의 접근이 완전히 차단되고 Primary 로 부터 수신한 복제 데이터만 수신하여 장치에 반영하는 동작만 역할을 수행합니다.

리소스가 기동되었을 때 기본 역할은 Secondary 이며 사용자 명령에 의해 Primary 역할로 전환할 수 있습니다. 이것을 승격(promote)이라고 합니다.

Code Block
bsrdadm primary <resource>

복제 클러스터 내의 모든 노드가 연결 성립된 연결된 상태에서 Primary 역할을 가질 수 있는 노드는 하나만 존재할 수 있습니다. 그러나 상황에 따라 노드 간 연결이 단절된 상태에서 단절될 경우 상황에 따라 특정시점에 Primary 역할을 가졌던 노드가 2 이상이 될 경우 수 있습니다. 이러한 상태를 스플릿 브레인 상태라고 합니다.

이와 관련한 자세한 내용은 스플릿 브레인 항목을 참고하세요.

Info

리눅스 환경의 경우에는 승격을 하기 전에 볼륨에 대한 마운트 과정이 요구됩니다. 윈도우즈 환경에선 쉘 수준에서 볼륨에 대한 자동 마운트가 수행되기 때문에 별도의 마운트 작업이 필요치 않습니다.

강등

Primary 역할에서 Secondary 역할로 전환하는 것을 강등이라고 합니다.

Code Block
bsradm secondary <resource>

...

Info

리눅스 환경의 경우 강등을 수행하기 전 볼륨에 대한 마운트 해제의 과정이 요구됩니다. 윈도우즈 환경에선 강등명령 자체적으로 마운트 해제와 강등을 같이 수행하기 때문에 별도의 마운트 해제 과정이 필요치 않습니다.

마운트 해제와 리소스 강등은 bsr의 명령 동작 중 가장 민감한 부하가 큰 작업으로 단순히 역할만 Secondary 로 전환하는 것을 넘어서 복제를 위해 역할을 전환하는 것과 함께 복제 계류 중인 데이터들을 타깃 측으로 모두 반영하는 작업을 수반합니다. 이는 복제 소스와 타깃 간의 데이터 정합성을 일치시키기 위한 기본 동작 구조로, 강등이 완료된 시점의 Primary 와 Secondary 간의 데이터 정합성을 보장하는 동작입니다. 따라서 마운트 해제, 강등을 수행하는 절차에선 복제 계류중인 데이터를 타깃에 모두 반영하는데 따르는 일정 정도의 대기시간을 염두에 두어야 합니다.

...

bsradm down 명령을 통해 리소스를 중지할 수 있습니다. down 은 리소스 앞서 설명한 up 과정의 역순으로 중지하고 역순에 따라 중지가 수행하고 만약 리소스가 승격된 상태 였다면 강등을 먼저 수행합니다. 즉 리소스 강등, 복제 단절, 볼륨 분리(detach), 리소스 해제의 순으로 down 합니다.

...

복제 볼륨으로 적재했던 볼륨을 분리하고 메타디스크에 관련 정보를 기록합니다. 분리(detach)는 개별 명령으로 수행할 수 있으나 Primary 리소스의 볼륨 볼륨에 대한 분리는 허용되지 않습니다.

Info

bsr 에선 운영 중인 리소스의 볼륨 분리는 장애로 직결되기 때문에 위험한 동작으로 간주합니다. 우리는 간주했으며 Primary 리소스의 볼륨 detach 를 코드 수준에서 차단하였습니다. 물론 Secodnary 리소스의 볼륨 분리는 허용합니다.

리소스 해제

리소스를 위해 할당 했던 메모리 인스턴스를 자원들을 해제합니다.

리소스 재구성

bsr 의 리소스 속성들은 기본적으로 운영 중(런타임) 설정 변경을 지원합니다. 이것을 동적 설정 (변경)이라고 합니다. 그러나 이러한 속성들 중 일부 필수 속성들은 동적 설정을 지원하지 않으며 설정 변경 구성파일의 설정을 변경한 후 리소스를 재기동하여 적용하는 정적 방식으로 재구성해야 합니다. 즉 동적 설정과 정적 설정의 차이점은 리소스 재기동의 필요 여부 입니다경우 리소스 재기동이 필요합니다.

동적 설정

구성파일을 변경하고 bsradm adjust 명령을 통해 실시간 변경합니다. 복제 프로토콜 변경 등 일부 특수 설정을 제외한 대부분의 속성은 이 방식으로 변경할 수 있습니다.

...

복제 구성을 위한 필수적인 설정(노드 ID, IP 주소, 포트, 볼륨 등)의 변경이 필요할 경우 리소스 down 을 선행한 후 설정 변경을 해야 설정을 변경해야 합니다. 리소스를 down 하여 구성파일을 변경한 후 다시 up 하여 리소스를 재시작하는 리소스가 재시작되는 시점에 변경된 설정을 적용하는 것 입니다설정이 반영됩니다.

전체 재구성

  • 운영 중 복제 구성에 문제가 있거나 장애 복구를 해야할 구성을 완전히 변경해야 하거나 디스크 장애등을 위한 복구가 필요한 경우 리소스 전체를 재 구성해야 합니다. 이 경우에는 먼저 운영 중인 리소스를 down 한 후 구성을 변경하고 메타 재 초기화를 수행하여 리소스를 재 기동 기동해야 합니다.

Info

Windows 의 경우 리소스 전체 재구성 과정에서 볼륨에 걸려있는 락을 해제해야 할 경우가 있습니다. 이럴 때에 bsrcon 유틸리티의 /m 옵션을 사용하여 볼륨락을 해제할 수 있습니다.

  • 메타 초기화를 했기 때문에 리소스 디스크를 초기화하면 볼륨에 대한 초기 동기화의 절차를 다시 수행해야 합니다.

...