- applyReplicatedPut/Delete keep in-memory graphs in sync with node/edge table rows (idempotent edges via addEdgeWithIdIfAbsent). - When Raft is enabled, DML is refused on any database other than 'default' (the only DB the state machine is wired to). - Docs updated (en/bg); unit test for graph apply.
4.7 KiB
Разпределена Система
BaraDB поддържа разпределено внедряване с Raft консенсус, шардиране, репликация и gossip протокол.
⚠️ Ограничение при множество бази данни Разпределените модули (Raft, шардиране и репликация) в момента работят само с
defaultбазата данни. Ако използвате множество бази (CREATE DATABASE,USE DATABASE), разпределените функции още не ги обхващат. Всяка база данни се нуждае от отделна кластър конфигурация.
Raft Консенсус
Leader election и log репликация през TCP. Включване:
| Env | Значение |
|---|---|
BARADB_RAFT_ENABLED=true |
Включва Raft |
BARADB_RAFT_NODE_ID |
Id на този възел |
BARADB_RAFT_PORT |
Raft TCP порт |
BARADB_RAFT_PEERS |
Списък id@host:port (вкл. себе си) |
BARADB_RAFT_WRITE_TIMEOUT_MS |
Макс. изчакване за majority commit при SQL записи (по подразбиране 5000) |
Когато Raft е активен, SQL DML (INSERT/UPDATE/DELETE/MERGE и транзакционен COMMIT) се приема само от лидера на default базата: KV двойките се добавят в Raft лога и клиентът чака majority commit. Followers отказват записи с not leader; leader is '…'. Записи към друга database name се отказват (raft writes only supported on the 'default' database). Приложените записи обновяват LSM + secondary B-tree/FTS/HNSW индекси и in-memory графи на всеки възел. DDL (напр. CREATE TABLE) още не се репликира — схемата трябва да се създаде на всеки възел.
import barabadb/core/raft
var cluster = newRaftCluster()
cluster.addNode("node1")
cluster.addNode("node2")
cluster.addNode("node3")
let n1 = cluster.nodes["n1"]
n1.becomeCandidate()
n1.becomeLeader()
let entry = n1.appendLog("SET key1 value1")
Шардиране
Разпределение на данни между възли:
import barabadb/core/sharding
var router = newShardRouter(ShardConfig(
numShards: 4,
replicas: 2,
strategy: ssHash
))
router.rebalance(@["node1", "node2", "node3"])
let shard = router.getShard("user_123")
Стратегии за Шардиране
| Стратегия | Описание |
|---|---|
ssHash |
Хеш-базирано шардиране |
ssRange |
Range-базирано шардиране |
ssConsistent |
Consistent hashing |
Репликация
import barabadb/core/replication
var rm = newReplicationManager(rmSync)
rm.addReplica(newReplica("r1", "10.0.0.1", 9472))
rm.connectReplica("r1")
let lsn = rm.writeLsn(@[1'u8, 2, 3])
rm.ackLsn("r1", lsn)
Режими на Репликация
| Режим | Описание |
|---|---|
rmSync |
Синхронна репликация |
rmAsync |
Асинхронна репликация |
rmSemiSync |
Полу-синхронна репликация |
Gossip Протокол
Управление на членство и детекция на откази:
import barabadb/core/gossip
var g = newGossipProtocol("node1", "localhost", 9472, gossipPort = 9572)
g.join(newGossipNode("node2", "10.0.0.2", 9472))
Разпределени Транзакции
Two-phase commit между възли:
import barabadb/core/disttxn
var tm = newDistTxnManager()
let txn = tm.beginTransaction("node1")
txn.addParticipant("node2", "10.0.0.2", 9472)
txn.prepare()
txn.commit()
Формална Верификация
Основните разпределени алгоритми са формално специфицирани в TLA+ и проверени с TLC:
- Raft Консенсус —
formal-verification/raft.tla- Проверено: ElectionSafety, StateMachineSafety
- Two-Phase Commit —
formal-verification/twopc.tla- Проверено: Atomicity, NoOrphanBlocks
- Репликация —
formal-verification/replication.tla- Проверено: MonotonicLsn, AcksRemovePending
Пускане на TLC локално:
cd formal-verification
java -cp tla2tools.jar tlc2.TLC -config models/raft.cfg raft.tla
java -cp tla2tools.jar tlc2.TLC -config models/twopc.cfg twopc.tla
java -cp tla2tools.jar tlc2.TLC -config models/replication.cfg replication.tla