ダイノマイト

Dynamo ホワイトペーパーからインスピレーションを得たDynomite は、さまざまなストレージエンジンとプロトコルに対応した薄い分散型ダイナモレイヤーです。現在、これらには Redis と Memcached が含まれます。 Dynomite は複数のデータセンターのレプリケーションをサポートし、高可用性を実現するように設計されています。

Dynomite の最終目標は、本来はその機能を提供しないストレージエンジンに高可用性とデータセンター間のレプリケーションを実装できるようにすることです。実装は効率的で、複雑ではなく (可動部分がほとんどない)、パフォーマンスが高くなります。

ワークフロー

v0.5.9、v0.5.8 などの番号が付けられたすべてのブランチは安定しており、プレリリースとしてマークされていない限り、本番環境で安全に使用できます。 dev ブランチは開発が不安定なブランチです。時間の経過とともに、master ブランチは遅れをとり、メンテナンスされなくなりました。最終的には削除しますが、再作成する場合もあれば、再作成しない場合もあります。

質問や貢献については、CONTRIBUTING.md を読むことを検討してください。

建てる

デバッグログを有効にし、アサーションを無効にしてソースから Dynomite をビルドするには:

 $ git clone [email protected]:Netflix/dynomite.git
$ cd dynomite
$ autoreconf -fvi
$ ./configure --enable-debug=yes
$ make
$ src/dynomite -h

Dynomite をデバッグモードでビルドするには:

 $ git clone [email protected]:Netflix/dynomite.git
$ cd dynomite
$ autoreconf -fvi
$ CFLAGS="-ggdb3 -O0" ./configure --enable-debug=full
$ make
$ sudo make install

ヘルプ

 Usage: dynomite [-?hVdDt] [-v verbosity level] [-o output file]
                  [-c conf file] [-p pid file] 

Options:
  -h, --help              : this help
  -V, --version           : show version and exit
  -t, --test-conf         : test configuration for syntax errors and exit
  -g, --gossip            : enable gossip (default: disabled)
  -d, --daemonize         : run as a daemon
  -D, --describe-stats    : print stats description and exit
  -v, --verbosity=N       : set logging level (default: 5, min: 0, max: 11)
  -o, --output=S          : set logging file (default: stderr)
  -c, --conf-file=S       : set configuration file (default: conf/dynomite.yml)
  -p, --pid-file=S        : set pid file (default: off)
  -x, --admin-operation=N : set size of admin operation (default: 0)

構成

Dynomite は、プロセス開始時に -c または --conf-file コマンドライン引数で指定された YAML 1.1 (YAML 1.1 は JSON 互換ではありません) ファイルを通じて構成できます。構成ファイルは次のキーを解析して理解します。

env : ノードの環境を指定します。現在、aws とネットワーク (物理データセンターの場合) をサポートしています。
datacenter : データセンターの名前。アーキテクチャドキュメントを参照してください。
ラック: ラックの名前。アーキテクチャドキュメントを参照してください。
dyn_listen : ダイノマイトノードが相互通信やゴシップに使用するポート。
Enable_gossip : 静的トークンの代わりにゴシップを有効にします (デフォルト: false)。ゴシップは実験的なものです。
gos_interval : ゴシップラウンド終了時のスリープ時間 (ミリ秒単位)。
tokens : ノードが所有するトークン。現在、vnode はまだサポートされていないため、当面は 1 つのトークンでのみ機能します。
dyn_seed_provider : シードノードのリストを提供するシードプロバイダーの実装。
dyn_seeds : 形式のシードノードのリスト: address:port:rack:dc:tokens (vnode はまだサポートされていないことに注意してください)
listen : このサーバープールのリスニングアドレスとポート (name:port または ip:port)。
timeout : サーバーへの接続を確立するか、サーバーからの応答を受信するまでに待機するタイムアウト値 (ミリ秒)。デフォルトでは、無期限に待機します。
preconnect : プロセス開始時に dynomite がこのプール内のすべてのサーバーに事前接続するかどうかを制御するブール値。デフォルトは false です。
data_store : サーバープールが redis (0) または memcached (1) またはその他のプロトコルを使用するかどうかを制御する整数値。デフォルトは redis (0) です。
auto_eject_hosts : サーバーが連続してserver_failure_limit回失敗した場合に、サーバーを一時的に排出するかどうかを制御するブール値。詳細については、活性に関する推奨事項を参照してください。デフォルトは false です。
server_retry_timeout : auto_eject_host が true に設定されている場合に、一時的に排出されたサーバーで再試行する前に待機するタイムアウト値 (ミリ秒)。デフォルトは 30000 ミリ秒です。
server_failure_limit : auto_eject_host が true に設定されている場合に、サーバーが一時的に排除される原因となる連続したサーバー上の障害の数。デフォルトは 2 です。
servers : このサーバープールのローカルサーバーアドレス、ポート、および重み (name:port:weight または ip:port:weight) のリスト。現在のところ、1 つだけあります。
secure_server_option : 暗号化通信。「なし」、「ラック」、「データセンター」、または「すべて」のいずれかである必要があります。 datacenterは、データセンター間のすべての通信が暗号化されるが、データセンター内では暗号化されないことを意味します。 rack 、ラックとリージョン間のすべての通信が暗号化されますが、同じラック内のノード間の通信は暗号化されないことを意味します。 allすべてのノード間のすべての通信が暗号化されることを意味します。また、 noneは、通信が暗号化されていないことを意味します。
stats_listen : REST エンドポイントおよび統計にアクセスするためのアドレスとポート番号。
stats_interval : 統計集計間隔をミリ秒単位で設定します (デフォルト: 30000 ミリ秒)。
mbuf_size : mbuf チャンクのサイズ (バイト単位) (デフォルト: 16384 バイト)。
max_msgs : 割り当てるメッセージの最大数 (デフォルト: 200000)。
datastore_connections : ローカルデータストアへの接続の最大数。
local_peer_connections : ローカル DC ピアへの接続の最大数。
Remote_peer_connections : リモート DC ピアへの接続の最大数。
dyn_port : Dynomite サーバーが相互に通信するために使用するポート。