[解決済み] ElasticsearchをMongoDBで使うには？

質問

Elasticsearch for MongoDBを使用してMongoDBのCollectionをインデックスする設定について、多くのブログやサイトを見てきましたが、どれも簡単ではありませんでした。

elasticsearchをインストールするためのステップバイステッププロセスを説明してください。

• 設定
• ブラウザで実行する

Node.jsをexpress.jsで使っているので、それに合わせてヘルプをお願いします。

どのように解決するのですか？

この答えで、このチュートリアルに従うためのセットアップは十分です。 MongoDB、Elasticsearch、AngularJSを使った機能的な検索コンポーネントの構築 .

もし、APIからのデータでファセット検索を使いたいのであれば、Matthiasnの バードウォッチレポ をご覧になってみてください。

ここでは、EC2 Ubuntu 14.04インスタンスで、NodeJS、Expressアプリで使用するMongoDBのインデックスを作成するために、シングルノードのElasticsearchクラスタを設定する方法を説明します。

すべてが最新であることを確認してください。

sudo apt-get update

NodeJSをインストールします。

sudo apt-get install nodejs
sudo apt-get install npm

MongoDBをインストールする - この手順は、MongoDBのドキュメントからそのまま引用しています。 好きなバージョンを選んでください。私はv2.4.9が最新版だと思うので、このまま使います。 MongoDB-リバー は問題なくサポートされています。

MongoDBの公開GPGキーをインポートします。

sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv 7F0CEB10

ソースリストを更新します。

echo 'deb http://downloads-distro.mongodb.org/repo/ubuntu-upstart dist 10gen' | sudo tee /etc/apt/sources.list.d/mongodb.list

10gen パッケージを取得します。

sudo apt-get install mongodb-10gen

最新のものが必要でない場合は、バージョンを選択してください。Windows 7または8マシンで環境を構築する場合は、サービスとして実行する際のバグが解決されるまで、v2.6には手を出さないようにしてください。

apt-get install mongodb-10gen=2.4.9

アップデートの際に、MongoDB インストールのバージョンが上がるのを防ぐ。

echo "mongodb-10gen hold" | sudo dpkg --set-selections

MongoDBサービスを開始します。

sudo service mongodb start

データベースファイルのデフォルトは /var/lib/mongo で、ログファイルのデフォルトは /var/log/mongo です。

mongo シェルでデータベースを作成し、いくつかのダミーデータをそこにプッシュします。

mongo YOUR_DATABASE_NAME
db.createCollection(YOUR_COLLECTION_NAME)
for (var i = 1; i <= 25; i++) db.YOUR_COLLECTION_NAME.insert( { x : i } )

現在 スタンドアロンのMongoDBをReplica Setに変換する .

まず、プロセスをシャットダウンします。

mongo YOUR_DATABASE_NAME
use admin
db.shutdownServer()

ここでは MongoDB をサービスとして動かしているので、mongod プロセスを再起動するときにコマンドライン引数で "--replSet rs0" オプションを渡さないようにします。そのかわり mongod.conf ファイルにこのオプションを記述します。

vi /etc/mongod.conf

以下の行を追加し、dbとlogのパスを代入します。

replSet=rs0
dbpath=YOUR_PATH_TO_DATA/DB
logpath=YOUR_PATH_TO_LOG/MONGO.LOG

ここでもう一度 mongo シェルを開き、レプリカセットを初期化します。

mongo DATABASE_NAME
config = { "_id" : "rs0", "members" : [ { "_id" : 0, "host" : "127.0.0.1:27017" } ] }
rs.initiate(config)
rs.slaveOk() // allows read operations to run on secondary members.

次にElasticsearchをインストールします。私は、この参考になる通りに 要旨 .

Javaがインストールされていることを確認します。

sudo apt-get install openjdk-7-jre-headless -y

Mongo-River プラグインのバグが v1.2.1 で修正されるまで、今のところ v1.1.x を使い続けてください。

wget https://download.elasticsearch.org/elasticsearch/elasticsearch/elasticsearch-1.1.1.deb
sudo dpkg -i elasticsearch-1.1.1.deb

curl -L http://github.com/elasticsearch/elasticsearch-servicewrapper/tarball/master | tar -xz
sudo mv *servicewrapper*/service /usr/local/share/elasticsearch/bin/
sudo rm -Rf *servicewrapper*
sudo /usr/local/share/elasticsearch/bin/service/elasticsearch install
sudo ln -s `readlink -f /usr/local/share/elasticsearch/bin/service/elasticsearch` /usr/local/bin/rcelasticsearch

今のところ単一ノードでしか開発していない場合は、/etc/elasticsearch/elasticsearch.ymlに以下の設定オプションが有効になっていることを確認してください。

cluster.name: "MY_CLUSTER_NAME"
node.local: true

Elasticsearchサービスを起動します。

sudo service elasticsearch start

動作確認をしてください。

curl http://localhost:9200

このように表示されればOKです。

{
  "status" : 200,
  "name" : "Chi Demon",
  "version" : {
    "number" : "1.1.2",
    "build_hash" : "e511f7b28b77c4d99175905fac65bffbf4c80cf7",
    "build_timestamp" : "2014-05-22T12:27:39Z",
    "build_snapshot" : false,
    "lucene_version" : "4.7"
  },
  "tagline" : "You Know, for Search"
}

ここで、Elasticsearchのプラグインをインストールして、MongoDBと連携できるようにします。

bin/plugin --install com.github.richardwilly98.elasticsearch/elasticsearch-river-mongodb/1.6.0
bin/plugin --install elasticsearch/elasticsearch-mapper-attachments/1.6.0

この2つのプラグインは必須ではありませんが、クエリのテストやインデックスの変更を視覚化するのに適しています。

bin/plugin --install mobz/elasticsearch-head
bin/plugin --install lukas-vlcek/bigdesk

Elasticsearchを再起動します。

sudo service elasticsearch restart

最後にMongoDBからコレクションのインデックスを作成します。

curl -XPUT localhost:9200/_river/DATABASE_NAME/_meta -d '{
  "type": "mongodb",
  "mongodb": {
    "servers": [
      { "host": "127.0.0.1", "port": 27017 }
    ],
    "db": "DATABASE_NAME",
    "collection": "ACTUAL_COLLECTION_NAME",
    "options": { "secondary_read_preference": true },
    "gridfs": false
  },
  "index": {
    "name": "ARBITRARY INDEX NAME",
    "type": "ARBITRARY TYPE NAME"
  }
}'

Elasticsearchにインデックスがあることを確認する

curl -XGET http://localhost:9200/_aliases

クラスタの健全性を確認します。

curl -XGET 'http://localhost:9200/_cluster/health?pretty=true'

未割り当てのシャードがあって黄色いんでしょうね。Elasticsearchに何を扱うか伝えなければなりません。

curl -XPUT 'localhost:9200/_settings' -d '{ "index" : { "number_of_replicas" : 0 } }'

クラスタの健全性を再度確認します。今は緑色になっているはずです。

curl -XGET 'http://localhost:9200/_cluster/health?pretty=true'

再生してください。