이 섹션에서는 application을 elasticsearch의 다른 버전으로 migration을 할 필요가 있을 때, 변경사항에 대해서 논의한다.

일반적으로 다음 Rule을 따른다.

• Major version이 다른 제품으로 migration - 예를 들어 1.x에서 2.x로 - 전체 cluster 재시작 필요 (restart upgrade)
• Minor version이 다른 제품으로 migration - 예를 들어 1.x에서 1.y로 - 한번에 하나의 node upgrade 수행 (rolling upgrade)

더 자세한 내용은 07. Upgrading 섹션을 참고하라.

Rolling upgrade process

Rolling upgrade는 ES cluster에서 한번에 하나의 노드만 upgrade되게 한다. 따라서 end user는 다운타임을 느낄 수 없다. 동일 cluster에서 upgrade를 지원하는 기간을 넘어서 더 이상 지원하지 않는 여러 버전의 elasticsearch를 실행하는 것, 특히 더 최근 버전으로 이전 버전에 대한 shard replication을 구성하는 것은 동작하지 않는다.

1.0 release 이후 minor or maintenance release에서, rolling upgrade가 지원된다. Rolling upgrade를 수행하기 위해서는,

• Disable Shard reallocation(optional). Cluster shutdown 이후 작업이 더 빠르게 수행하게 한다. 이 단계를 수행하지 않으면, 노드들은 startup 시점에 각각 shard를 즉시 복제하려고 할 것이다. 그리고 그것은 IO에 많은 시간을 써버린다. Shard reallocation을 disable하면 노드들은 rebalance를 시도하지 않고, 각각의 index만을 그대로 가지고 cluster에 참여한다. Startup이 완료되면 백그라운드에서 reallocation이 일어난다.

Elasticsearch 1.0 이후 버전에서 다음과 같이 실행한다.

curl -XPUT localhost:9200/_cluster/settings -d '{
               "transient" : {
                  "cluster.routing.allocation.enable" : "none"
               }
       }'

• Cluster내에서 하나의 노드를 shutdown한다.

curl -XPOST 'http://localhost:9200/_cluster/nodes/_local/_shutdown'

• 남아 있는 실행 중인 노드들에서 모든 shard들이 완전히 reallocate되었는지 확인한다.

• 정지된 노드의 upgrade를 실행한다. Elastic.co로부터 zip 파일이나 tarball을 사용하여 upgrade를 수행한다.
• 새로운 디렉토리에 zip이나 tarball을 압축해제한다. 일반적으로 현재 설치된 elasticsearch와 동일한 volume에 위치시킨다. 현재 설치된 폴더를 덮어쓰면 안 된다. 왜냐하면 다운로드 받은 압축파일에는 default elasticsearch.yml 파일을 포함하고 있어서 현재 설정을 덮어쓰기 때문이다.
• 이전 Elasticsearch 설치 폴더에서 설정 파일을 복사하여 새로운 Elasticsearch의 config directory에 넣는다. 필요하면 이전 Elasticsearch 설치 버전의 data directory를 다른 곳으로 옮긴다. 만약 tarball 압축해제 폴더 내에 data file이 없으면 다른 곳으로 옮길 필요 없다.
• 하나의 버전에서 다른 버전으로 옮기는 가장 간단한 해결책은 현재 실행중인 버전을 나타내는 elasticsearch의 sympolic link를 가지고 하는 것이다. 이 link는 쉽게 가장 최근 버전을 나타내도록 update할 수 있고, 안정적으로 접근할 수 있게 한다. 만약 link를 사용하고 있다면 이 link를 update하라.

• .deb나 .rpm package를 사용하여 upgrade하기 위해서는
• 새로운 패키지를 설치하기 위해 rpm이나 dpkg를 이용하라. 모든 파일들은 적합한 location에 위치하게 되고, config 파일은 덮어쓰면 안된다.

• Upgrade된 노드를 시작하라. Cluster에 참여하는지 확인한다.

• Shard reallocation을 재활성화한다. (re-enable)

curl -XPUT localhost:9200/_cluster/settings -d '{
               "transient" : {
                  "cluster.routing.allocation.enable" : "all"
               }
       }'

• 모든 노드에 모든 shard가 적장하게 할당되었는지 확인한다. Balancing은 약간의 시간이 걸린다.

• 모든 남아 있는 노드들에 대해서 이 과정을 반복한다.

[IMPORTANT]

Rolling upgrade 하는 동안, 더 높은 버전의 노드에 할당된 primary shard는 절대로 하위 버전의 노드에 replicas를 할당하지 않는다. 왜냐하면 새로운 버전은 이전 버전에서 이해할 수 없는 다른 데이터 형태를 갖고 있기 때문이다.

상위 버전의 노드에서 다른 노드로 replica르 ㄹ할당하는 것이 가능하지 않다면, 예를 들어 cluster내에 하위 버전의 노드가 하나밖에 없을 경우, replica shard는 할당되지 않고 남아 있게 된다. 따라서 cluster health는 yellow 상태이다. Cluster내에 다른 상위 버전의 노드가 참여하는 즉시 replica는 할당되고 cluster의 상태는 green으로 변경될 것이다.

서비스가 실행되고 있는 동안에 새로운 소프트웨어가 설치되어 upgrade를 수행하는 것도 가능하다. 이것은 upgrade된 노드에서 service가 정지하자마자 새로운 버전을 실행하여 downtime을 감소시킨다. 이것은 새로운 버전을 별도의 디렉토리에 설치하고, symbolic link method를 이용하면 가능하다. 이 과정을 테스트 하기 위해서는 먼저 site-specific 설정 데이터와 production index들을 upgrade 과정 중에 덮어쓰지 않아야 한다.

Cluster restart upgrade process

Elasticsearch의 1.0버전 이전과 이후는 서로 호환되지 않는다. 따라서 rolling upgrade는 불가능하다. 1.0 이전 버전 시스템에서 1.0 이후버전 시스템으로 upgrade하기 위해서는 cluster 전체를 stop하고 start하는 것이 필요하다. 이러한 upgrade를 수행하기 위해서는

• Disable Shard reallocation (optional). Cluster shutdown이후 더 빠르게 시작할 수 있다. 이 작업을 수행하지 않으면, 노드들은 시작시점에 즉시 서로 shard를 복제하려고 시작할 것이다. 그리고 이 과정에서 낭비되는 IO로 많은 시간을 보낸다. Shard reallocation이 disable되면, 노드들은 자신의 index들만 가지고 cluster에 참여하고 rebalance를 시도하지 않는다. Startup이 완료되면, reallocation이 백그라운드에서 실행될 것이다.

1.0 이전 버전에서 syntax는 다음과 같다.

curl -XPUT localhost:9200/_cluster/settings -d '{
               "persistent" : {
              "cluster.routing.allocation.disable_allocation" : true
               }
       }'

• Upgrade할 첫번째 노드에 압축 파일을 해제하고 위 Rolling Upgrade Section에서 설명한 대로 새로운 package를 설치한다. 모든 노드에 대해서 반복한다.

• 모든 노드에 elasticsearch upgrade가 완료되면 각 노드를 개별적으로 실행하여 cluster를 시작한다.
• Master 자격이 있는 노드를 먼저 시작한다. Quorum 기반 master가 선출되었는지 확인하라.
• Data 노드를 실행하고, client 노드들을 시작하라. Cluster에 성공적으로 참여했는지 확인하라.

• Cluster가 실행되고, yellow 상태에 이르면 shard reallocation을 할 수 있다.

1.0 이후 버전에서는 다음 syntax로 실행할 수 있다.

curl -XPUT localhost:9200/_cluster/settings -d '{
               "persistent" : {
              "cluster.routing.allocation.disable_allocation": false,
              "cluster.routing.allocation.enable" : "all"
               }
       }'

이 cluster upgrade는 cluster 서비스를 종료하기 전에 새로운 소프트웨어를 설치하여 간단하게 수행할 수 있다. 이 작업이 완료되면 restart를 시작하기 전에 production data와 설정 파일들이 덮어써지지는 않았는지 반드시 확인하는 테스트가 수행되어야 한다.

Elasticsearch는 단계적인 규칙으로 이루어진 upgrade process를 이용하여 서비스 중단 없이 upgrade될 수 있다.  이 섹션에서는 어떻게 단계적으로 upgrade를 수행하거나 재시작할 수 있는지를 살펴본다. Rolling upgrade를 설치하고자 하는 elasticsearch release에서 지원하는지 아닌지 알기 위해서 다음 표를 활용하라.

[TIP]

Elasticsearch를 upgrade하기 전에 breaking changes (http://www.elastic.co/guide/en/elasticsearch/reference/current/breaking-changes.html) docs를 통해 컨설팅을 받아보는 것도 좋은 생각이다.

Backup Your Data!

Upgarde를 수행하기 전에 system의 data를 backup 하는 것이 좋다. Upgrade과정 중에 오류가 발생해서 원래 상태로 roll back하는데 필요하다. Upgrade는 때로 Elasticsearch가 index file에 접근하는데 필요한 Lucene libraries를 upgrade하기도 한다. 그리고 한번 Lucene이 새로운 버전으로 upgrade되고 나면, 이전 버전의 elasticsearch release에서는 현재 Lucene 버전으로 접근할 수 없다.

0.90.x 이전 버전

0.90.x system을 백업하고, index flushing을 하지 않도록 한다. 백업 과정에서 index를 disk에 flush하지 않도록 방지한다.

$ curl -XPUT 'http://localhost:9200/_all/_settings' -d '{
   "index": {
      "translog.disable_flush": "true"
   }
}'

그리고 재할당을 하지 않도록 한다. 백업 과정 중에 하나의 노드로부터 다른 노드로 data를 옮기는 것을 방지한다.

$ curl -XPUT 'http://localhost:9200/_cluster/settings' -d '{
   "transient" : {
      "cluster.routing.allocation.disable_allocation": "true"
   }
}'

재할당과 index flush를 하지 않도록 설정한 다음에, 선호하는 백업 방식(tar, storage array snapshot, backup software)으로 Elasticsearch Data를 백업한다. 백업이 완료되고 더 이상 Elasticsearch data path에서 읽을 데이터가 없으면 재할당과 index flush를 가능하도록 설정한다.

$ curl -XPUT 'http://localhost:9200/_all/_settings' -d '{
   "index": {
      "translog.disable_flush": "false"
   }
}'

$ curl -XPUT 'http://localhost:9200/_cluster/settings' -d '{
   "transient" : {
      "cluster.routing.allocation.disable_allocation": "false"
   }
}'

1.0 이후 버전

1.0 이후 버전을 백업하기 위해서는 snapshot 기능을 사용하여 간단하게 할 수 있다. 자세한 방법은 backup and restore with snapshots (http://www.elastic.co/guide/en/elasticsearch/reference/current/modules-snapshots.html) 을 통해서 알 수 있다.

APT나 YUM 기반 배포판을 이용할 수 있도록 Repositories도 제공하고 있다. Source가 아니라 Elasticsearch를 빌드한 Binary package만을 제공한다. Major 버전을 통한 우발적인 upgrade를 피하기 위해서 major 버전별로 url을 나누었다. 0.90.x 버전은 전부 0.90으로, 1.0.x는 1.0으로, 1.1.x는 1.1과 같은 숫자로 표시한다.

Elasticsearch의 서명 키로는 PGP key D88E42B4 를 사용한다.

Fingerprint는 다음과 같다.

4609 5ACC 8548 582C 1A26 99A9 D27D 666C D88E 42B4

http://pgp.mit.edu 에서 사용할 수 있다.

APT

Public Singing Key를 다운로드 하고 설치한다.

wget -qO - https://packages.elastic.co/GPG-KEY-elasticsearch | sudo apt-key add -

/etc/apt/source.list 파일에 repositories 정의를 추가한다.

echo "deb http://packages.elastic.co/elasticsearch/1.5/debian stable main" | sudo tee -a /etc/apt/sources.list

[WARINIG]

Elasticsearch repositories를 추구하기 위해서 echo method를 사용하라. Source를 제공하지 않기 때문에 Add-apt-repository나 deb-src를 사용하지 말라. Deb-src entry를 추가했다면, 다음과 같은 error가 발생할 것이다.

Unable to find expected entry 'main/source/Sources' in Release file (Wrong sources.list entry or malformed file)

Just delete the deb-src entry from the /etc/apt/sources.list file and the installation should work as expected.

Repository가 준비되었다면 apt-get update를 실행하라. 다음과 같이 설치할 수 있다.

sudo apt-get update && sudo apt-get install elasticsearch

부팅할 때 자동으로 Elasticsearch를 실행하도록 설정하려면 다음과 같이 하면 된다.

sudo update-rc.d elasticsearch defaults 95 10

YUM

public Signing Key를 다운로드 받아서 설치한다.

rpm --import https://packages.elastic.co/GPG-KEY-elasticsearch

/etc/yum.repos.d/ 디렉토리에 .repo 확장자를 가진 파일을 추가하라. 예를 들어 elasticsearch.repo 파일을 만든다.

[elasticsearch-1.5]
name=Elasticsearch repository for 1.5.x packages
baseurl=http://packages.elastic.co/elasticsearch/1.5/centos
gpgcheck=1
gpgkey=http://packages.elastic.co/GPG-KEY-elasticsearch
enabled=1

그러면 repository를 사용할 준비가 된 것이다. 이제 설치할 수 있다.

yum install elasticsearch

부팅 시에 elasticsearch를 자동으로 시작하도록 설정해 보자. SysV init을 사용한 배포판이라면 다음과 같이 실행할 수 있다.

chkconfig --add elasticsearch

[WARNING]

CentOS5와 같은 RPM v3을 사용한 예전 rpm 기반 배포판이라면 repositories는 동작하지 않는다.

아니면 systemd를 사용하여 설치할 수 있다.

sudo /bin/systemctl daemon-reload
sudo /bin/systemctl enable elasticsearch.service

설치된 이후 폴더 구조는 다음과 같다.

Multiple data location은 stripe를 허용한다. Striping은 간단하게 하나의 location에 모든 파일을 위치시킬 수도 있고, index.store.distributor의 값에 근거해서 파일 위치를 결정할 수도 있다.

• least_used (default) : 항상 가장 적합한 space로 directory를 선택한다.

• random : 랜덤하게 directory를 선택한다. 특정 디렉토리가 선택될 가능성은 디렉토리에서 이용할 수 있는 space에 비례한다. 즉, 이용가능한 space가 많을수록 선택될 가능성이 높아진다.

동일한 데이터를 여러 번 복사하는 것이 아니라, RAID 0과 같음에 유의하라. 간단하지만, RAID를 사용하여 복잡하게 구성하고 싶지 않은 사람들에게 좋은 솔루션이 될 수 있다. 다음과 같이 설정하면 된다.

path.data: /mnt/first, /mnt/second

혹은 다음과 같이 array 형태로 설정할 수도 있다.

path.data: ["/mnt/first", "/mnt/second"]

Default Paths

아래 값들은 특별히 수정하지 않았다면, elasticsearch가 사용하는 default path들이다.

deb and rpm

zip and tar.gz