dinomit

Dynomite , terinspirasi oleh whitepaper Dynamo, adalah lapisan dinamo tipis yang terdistribusi untuk berbagai mesin penyimpanan dan protokol. Saat ini termasuk Redis dan Memcached. Dynomite mendukung replikasi multi-pusat data dan dirancang untuk ketersediaan tinggi.

Tujuan utama Dynomite adalah untuk dapat mengimplementasikan ketersediaan tinggi dan replikasi lintas pusat data pada mesin penyimpanan yang pada dasarnya tidak menyediakan fungsionalitas tersebut. Implementasinya efisien, tidak rumit (sedikit bagian yang bergerak), dan berkinerja tinggi.

Alur kerja

Setiap cabang bernomor seperti v0.5.9, v0.5.8 dll stabil dan aman untuk digunakan dalam produksi kecuali ditandai sebagai pra-rilis. Cabang dev adalah cabang pengembangan yang tidak stabil. Seiring waktu, cabang master tertinggal dan tidak dipertahankan. Kami pada akhirnya akan menghapusnya dan mungkin membuatnya kembali atau tidak.

Untuk pertanyaan atau kontribusi, silakan pertimbangkan untuk membaca CONTRIBUTING.md.

Membangun

Untuk membangun Dynomite dari sumber dengan log debug diaktifkan dan pernyataan dinonaktifkan :

 $ git clone [email protected]:Netflix/dynomite.git
$ cd dynomite
$ autoreconf -fvi
$ ./configure --enable-debug=yes
$ make
$ src/dynomite -h

Untuk membangun Dynomite dalam mode debug :

 $ git clone [email protected]:Netflix/dynomite.git
$ cd dynomite
$ autoreconf -fvi
$ CFLAGS="-ggdb3 -O0" ./configure --enable-debug=full
$ make
$ sudo make install

Membantu

 Usage: dynomite [-?hVdDt] [-v verbosity level] [-o output file]
                  [-c conf file] [-p pid file] 

Options:
  -h, --help              : this help
  -V, --version           : show version and exit
  -t, --test-conf         : test configuration for syntax errors and exit
  -g, --gossip            : enable gossip (default: disabled)
  -d, --daemonize         : run as a daemon
  -D, --describe-stats    : print stats description and exit
  -v, --verbosity=N       : set logging level (default: 5, min: 0, max: 11)
  -o, --output=S          : set logging file (default: stderr)
  -c, --conf-file=S       : set configuration file (default: conf/dynomite.yml)
  -p, --pid-file=S        : set pid file (default: off)
  -x, --admin-operation=N : set size of admin operation (default: 0)

Konfigurasi

Dynomite dapat dikonfigurasi melalui file YAML 1.1 (YAML 1.1 tidak kompatibel dengan JSON) yang ditentukan oleh argumen baris perintah -c atau --conf-file pada proses dimulai. File konfigurasi mem-parsing dan memahami kunci-kunci berikut:

env : Menentukan lingkungan suatu node. Saat ini mendukung aws dan jaringan (untuk pusat data fisik).
pusat data : Nama pusat data. Silakan merujuk ke dokumen arsitektur.
rak : Nama rak. Silakan merujuk ke dokumen arsitektur.
dyn_listen : Port yang digunakan node dinomit untuk berkomunikasi dan bergosip.
aktifkan_gossip : aktifkan gosip alih-alih token statis (default: false). Gosip bersifat eksperimental.
gos_interval : Waktu tidur dalam milidetik di akhir putaran gosip.
token : Token yang dimiliki oleh sebuah node. Saat ini, kami belum mendukung vnode jadi ini hanya berfungsi dengan satu token untuk saat ini.
dyn_seed_provider : Implementasi penyedia benih untuk menyediakan daftar node benih.
dyn_seeds : Daftar node seed dalam format: address:port:rack:dc:tokens (perhatikan bahwa vnode belum didukung)
mendengarkan : Alamat dan port pendengaran (nama:port atau ip:port) untuk kumpulan server ini.
timeout : Nilai batas waktu dalam mdetik yang kita tunggu untuk membuat koneksi ke server atau menerima respons dari server. Secara default, kami menunggu tanpa batas waktu.
preconnect : Nilai boolean yang mengontrol apakah dinomit harus melakukan prakoneksi ke semua server di kumpulan ini saat proses dimulai. Defaultnya salah.
data_store : Nilai bilangan bulat yang mengontrol apakah kumpulan server menggunakan redis (0) atau memcached (1) atau protokol lainnya. Defaultnya adalah redis (0).
auto_eject_hosts : Nilai boolean yang mengontrol apakah server harus dikeluarkan sementara ketika gagal berturut-turut server_failure_limit kali. Lihat rekomendasi keaktifan untuk informasi. Defaultnya salah.
server_retry_timeout : Nilai batas waktu dalam mdetik yang harus ditunggu sebelum mencoba ulang pada server yang dikeluarkan sementara, ketika auto_eject_host disetel ke true. Defaultnya adalah 30.000 mdetik.
server_failure_limit : Jumlah kegagalan berturut-turut pada server yang menyebabkan server dikeluarkan sementara ketika auto_eject_host disetel ke true. Defaultnya adalah 2.
server : Daftar alamat server lokal, port dan berat (nama:port:berat atau ip:port:berat) untuk kumpulan server ini. Saat ini, hanya ada satu.
secure_server_option : Komunikasi terenkripsi. Harus salah satu dari 'tidak ada', 'rak', 'pusat data', atau 'semua'. datacenter berarti semua komunikasi antar pusat data dienkripsi tetapi di dalam pusat data tidak. rack berarti semua komunikasi antar rak dan wilayah dienkripsi namun komunikasi antar node dalam rak yang sama tidak dienkripsi. all berarti semua komunikasi antara semua node dienkripsi. Dan none berarti tidak ada komunikasi yang dienkripsi.
stats_listen : Alamat dan nomor port untuk titik akhir REST dan untuk mengakses statistik.
stats_interval : mengatur interval agregasi statistik dalam mdetik (default: 30000 mdetik).
mbuf_size : ukuran potongan mbuf dalam byte (default: 16384 byte).
max_msgs : jumlah pesan maksimal yang akan dialokasikan (default: 200000).
datastore_connections : Jumlah maksimum koneksi ke datastore lokal.
local_peer_connections : Jumlah maksimum koneksi ke rekan DC lokal.
remote_peer_connections : Jumlah maksimum koneksi ke rekan DC jarak jauh.
dyn_port : Port yang digunakan oleh server Dynomite untuk berbicara satu sama lain.

Misalnya file konfigurasi di conf/dynomite.yml

Terakhir, untuk mempermudah penulisan file konfigurasi yang benar secara sintaksis, dynomite menyediakan argumen baris perintah -t atau --test-conf yang dapat digunakan untuk menguji file konfigurasi YAML untuk kesalahan sintaksis apa pun.