Я проводил тесты купола с помощью aerospike и заметил поведение, отличное от того, что продается.
У меня есть кластер из 4 узлов, работающих на AWS в той же AZ, экземпляры t2micro (1 ЦП, 1 ГБ ОЗУ, 25 ГБ SSD), использующие aws linux с AMI aerospike.
aerospike.conf:
heartbeat {
mode mesh
port 3002
mesh-seed-address-port XXX.XX.XXX.164 3002
mesh-seed-address-port XXX.XX.XXX.167 3002
mesh-seed-address-port XXX.XX.XXX.165 3002
#internal aws IPs
...
namespace teste2 {
replication-factor 2
memory-size 650M
default-ttl 365d
storage-engine device {
file /opt/aerospike/data/bar.dat
filesize 22G
data-in-memory false
}
}
То, что я сделал, было тестом, чтобы увидеть, потеряю ли я документы, когда узел выйдет из строя. Для этого я написал небольшой код на питоне:
from __future__ import print_function
import aerospike
import pandas as pd
import numpy as np
import time
import sys
config = {
'hosts': [ ('XX.XX.XX.XX', 3000),('XX.XX.XX.XX',3000),
('XX.XX.XX.XX',3000), ('XX.XX.XX.XX',3000)]
} # external aws ips
client = aerospike.client(config).connect()
for i in range(1,10000):
key = ('teste2', 'setTest3', ''.join(('p',str(i))))
try:
client.put(key, {'id11': i})
print(i)
except Exception as e:
print("error: {0}".format(e), file=sys.stderr)
time.sleep(1)
Я использовал этот код только для вставки последовательности целых чисел, которую я мог проверить после этого. Я запустил этот код и через несколько секунд остановил службу aerospike на одном узле на 10 секунд, используя sudo service aerospike stop и sudo service aerospike colstart для перезапуска.
Я подождал несколько секунд, пока узлы не выполнили всю миграцию, и выполнил следующий скрипт на Python:
query = client.query('teste2', 'setTest3')
query.select('id11')
te = []
def save_result((key, metadata, record)):
te.append(record)
query.foreach(save_result)
d = pd.DataFrame(te)
d2 = d.sort(columns='id11')
te2 = np.array(d2.id11)
for i in range(0,len(te2)):
if i > 0:
if (te2[i] != (te2[i-1]+1) ):
print('no %d'% int(te2[i-1]+1))
print(te2)
И получил в ответ:
no 3
no 6
no 8
no 11
no 13
no 17
no 20
no 22
no 24
no 26
no 30
no 34
no 39
no 41
no 48
no 53
[ 1 2 5 7 10 12 16 19 21 23 25 27 28 29 33 35 36 37 38 40 43 44 45 46 47 51 52 54]
Мой кластер настроен неправильно или это нормально?
PS: я попытался включить как можно больше вещей, если вы предложите дополнительную информацию для включения, я буду признателен.
