Nginx 逆生成 Mogilefs 分散ストレージ例の詳細な説明

~]# yum インストール -y mysql mysql-server

perl-Danga-Socket-1.61-1.el6.rf.noarch.rpm
perl-IO-stringy-2.110-1.2.el6.rfx.noarch.rpmperl-Net-Netmask-1.9015-8.el6.noarch.rpm
Perlbal-1.78-1.el6.noarch.rpmperl-Perlbal-1.78-1.el6.noarch.rpm
Perlbal-doc-1.78-1.el6.noarch.rpmperl-IO-AIO-3.71-2.el6.x86_64.rpm

yum インストール -y MogileFS-Server-mogstored-2.46-2.el6.noarch.rpm MogileFS-Server-mogilefsd-2.46-2.el6.noarch.rpm MogileFS-Server-2.46-2.el6.noarch.rpm

~]# vim /etc/mogilefs/mogilefsd.conf #Mogilfs Trackers のメイン設定ファイル

# デーモンモードを有効にしてバックグラウンドで動作し、syslog を使用する
daemonize = 1 #デーモンプロセスとして実行するかどうか。
# デーモンの pid を保存する場所 (init スクリプトと同じである必要があります)
pidfile = /var/run/mogilefsd/mogilefsd.pid #pidファイルパス# データベース接続情報
db_dsn = DBI:mysql:mogilefs:host=192.168.29.111 #データベースアドレス db_user = moguser #データベースユーザー名とパスワードを設定 db_pass = 123456
# mogilefs クライアント要求をリッスンする IP:PORT
listen = 0.0.0.0:7001 # リッスン アドレスとポート # 上記でポートを定義しない場合はオプションです。
conf_port = 7001 # デフォルトポート # デフォルトで開始するクエリワーカーの数。
query_jobs = 10 #クエリプロセスの数 #デフォルトで開始する削除ワーカーの数。
ジョブを削除する = 1 
# デフォルトで開始するレプリケートワーカーの数。
複製ジョブ = 5
# デフォルトで起動する Reaper ワーカーの数。
# (通常はこれを増やす必要はありません)
リーパージョブ = 1
# デフォルトで開始する fsck ワーカーの数。
# (fsck 時に大きな負荷が発生する可能性があります)
#fsck_ジョブ = 1
# 予約する最小容量（メガバイト単位）
# デフォルト: 100
# 最大ファイルサイズよりも大きいサイズに設定することを検討してください
# 通常はアップロードされます。
#最小空き容量 = 200
# ストレージノードが応答するまで待機する秒数。
# デフォルト: 2
# この値を低く保つと、ビジー状態のストレージノードはすぐに無視されます。
#ノードタイムアウト = 2
# ストレージ ノードへの接続を待機する秒数。
# デフォルト: 2
# この値を低く保つと、過負荷のノードがスキップされます。
#接続タイムアウト = 2
# レプリケーションにセカンダリノードのgetポートの使用を許可します。
# Apache または類似の GET 用の設定がある場合
#repl_use_get_port = 1

mysql> GRANT ALL ON mogilefs.* TO 'moguser'@'192.168.29.%' IDENTIFIED BY '123456'; # mogilefs データベースを管理するためのすべての権限を持ち、192.168.29.* のユーザーがリモートで接続できるようにするユーザー moguser を作成します。
mysql> 権限をフラッシュします。
mysql>終了

~]# mogdbsetup --dbhost=127.0.0.1 --dbuser=moguser --dbpass=123456

~]# サービス mogilefsd を開始
mogilefsd を起動しています [ OK ]
~]# ss -lnt

~]# vim /etc/mogilefs/mogstored.conf
maxconns = 10000 #同時接続の最大数httplisten = 0.0.0.0:7500 #Mogilefs のデータ転送は http プロトコルを介して行われます。リスニング アドレスとポートは次のとおりです。mgmtlisten = 0.0.0.0:7501 #ヘルス モニタリング用のリスニング アドレスとポートdocroot = /mogliefs/mogdata #データ ストレージ パス。ディレクトリのグループと所有者は mogilefs である必要があります

~]# mkdir -pv /mogliefs/mogdata
~]# chown -R mogilefs.mogilefs /mogliefs/

~]# サービス mogstored の開始
~]# ss -lnt #リスニングポートは7500と7501です

~]# scp /etc/mogilefs/*.conf [email protected]:/etc/mogilefs/
~]# scp /etc/mogilefs/*.conf [email protected]:/etc/mogilefs/

~]# サービス mogstored の開始
~]# ss -lnt #リスニングポートは7500と7501です

1 ~]# mogadm ホスト 192.168.29.111 を追加します --ip=192.168.29.111 --port=7500 --status=alive
2 ~]# mogadm ホスト 192.168.29.112 を追加します --ip=192.168.29.112 --port=7500 --status=alive
3 ~]# mogadm ホスト 192.168.29.113 を追加します --ip=192.168.29.113 --port=7500 --status=alive

~]# mogadm チェック

1 ~]# mogadmデバイスを追加 192.168.29.111 1
2 ~]# mogadmデバイスを追加 192.168.29.112 2
3 ~]# mogadmデバイスを追加 192.168.29.113 3

~]# mogadm domain add imgs #imgsという名前のドメインを作成する
~]# mogadm domain add text #textという名前のドメインを作成する
~]# mogadm domain list #ドメインリストを表示

~]# mogadm class add imgs png --mindevcount=3 --hashtype=MD5 #ドメイン imgs に png というクラスを定義し、3 つのコピーを異なるデバイスにコピーし、検証に MD5 を使用します~]# mogadm class add imgs jpg --mindevcount=3 --hashtype=MD5 #ドメイン imgs に jpg というクラスを定義し、3 つのコピーを異なるデバイスにコピーし、検証に MD5 を使用します~]# mogadm domain list

~]# mogupload --trackers=192.168.29.111 --domain=imgs --class=png --key='/111.png' --file='/test/123.png' # IP 192.168.29.111 の Trackers 経由で 123.png ファイルをアップロードし、ドメインを imgs、クラスを png としてスペースに保存し、名前を 111.png に変更します
~]# mogfileinfo --trackers=192.168.29.111 --domain=imgs --class=png --key='/111.png' #ドメイン imgs およびクラス png 内のキー 111.png を持つファイルの保存状態を確認します。 

~]# サービス mogilefsd を開始

~]# yum インストール gcc gcc-c++ perl pcre-devel openssl openssl-devel

~]# ls
nginx-1.10.3 nginx_mogilefs_module-1.0.4
nginx-1.10.3.tar.gz nginx_mogilefs_module-1.0.4.tar.gz

~]# cd nginx-1.10.3
./configure \
> --prefix=/usr \
> --sbin-path=/usr/sbin/nginx \
> --conf-path=/etc/nginx/nginx.conf \
> --error-log-path=/var/log/nginx/error.log \
> --http-log-path=/var/log/nginx/access.log \
> --pid-path=/var/run/nginx/nginx.pid \
> --lock-path=/var/lock/nginx.lock \
> --user=nginx \
> --group=nginx \
> --with-http_ssl_module \
> --with-http_flv_module \
> --with-http_stub_status_module \
> --with-http_gzip_static_module \
> --http-client-body-temp-path=/var/tmp/nginx/client/ \
> --http-proxy-temp-path=/var/tmp/nginx/proxy/ \
> --http-fastcgi-temp-path=/var/tmp/nginx/fcgi/ \
> --http-uwsgi-temp-path=/var/tmp/nginx/uwsgi \
> --http-scgi-temp-path=/var/tmp/nginx/scgi \
> --with-pcre \
> --デバッグあり\
> --add-module=../nginx_mogilefs_module-1.0.4/ #Mogilefs モジュールが配置されているパスを必ず追加してください。これは必須です。

~]# make と make install

~]# useradd -s /sbin/nologin -M nginx
~]# /usr/sbin/nginx

場所 /imgs/ {
   mogilefs_tracker 192.168.29.111:7001; #単一トラッカーの例 mogilefs_domain imgs; #ドメインの指定
   mogilefs_class png jpg; #クラスを指定

   mogilefs_pass { #送信関連の設定 proxy_pass $mogilefs_path;
    proxy_hide_header コンテンツタイプ;
    proxy_buffering をオフ;
   }
  }

1 アップストリーム mogsvr {
2 サーバー 192.168.29.111:7001;
3 サーバー 192.168.29.112:7001;
4 サーバー 192.168.29.113:7001;
5 }

場所 /imgs/ {
    mogilefs_tracker mogsvr;
   mogilefs_domain 画像;
   mogilefs_class png jpg;

   モギレフス_パス {
    proxy_pass $mogilefs_path;
    proxy_hide_header コンテンツタイプ;
    proxy_buffering をオフ;
   }
  }