CavalliumDBEngine

CavalliumDB 引擎

使用 Project Reactor 用 Jva (17+) 編寫的反應式資料庫引擎。

請勿使用此項目：這是一個個人項目，API 不穩定，程式碼未經測試。

該函式庫提供了鍵值儲存和搜尋引擎的基本反應式抽象化和實作。

有四種現成的實現，兩種用於鍵值存儲，兩種用於搜尋引擎，但可以添加更多實現。

鍵值存儲實現

1. RocksDB：用於快閃記憶體儲存的持久鍵值存儲
2. ConcurrentSkipListMap：並發記憶體中鍵值存儲

搜尋引擎實施

1. 具有自訂分片的持久性 Lucene Core：功能強大且快速的文字搜尋引擎庫
2. 記憶體中暫存 Lucene Core 實例：可用於建置和分析臨時索引

額外功能

可序列化的搜尋引擎查詢

可以使用高效的自訂序列化格式對查詢進行序列化和反序列化

直接位元組緩衝區

資料庫抽象化可以透過使用RocksDB JNI和Netty 5緩衝區來避免多次複製數據

聲明性資料記錄產生器和版本編解碼器

可以使用產生 Java 16 記錄的資料產生器：它允許您透過使用 .yaml 檔案定義欄位來產生自訂記錄。

生成器還在編譯時為每個自訂記錄產生專用序列化器、反序列化器和升級器的來源。

鍵值儲存抽象化可讓您透過自動使用自訂升級程式和自訂反序列化器來透明地反序列化舊版本的資料。

數據生成器可以在數據生成器存儲庫中找到。

特徵

• RocksDB 鍵值存儲

  • 快照
  • 多列資料庫
  • 預寫日誌和損壞恢復
  • 多種資料類型：
    • 單值（Singleton）
    • 地圖（字典）
    • 可組合巢狀映射（深度字典）
  • 可自訂的資料序列化器
  • 值編解碼器
  • 使用版本化編解碼器進行寫入時更新值版本控制

• Apache Lucene 核心索引庫

  • 快照
  • 文件結構
  • 排序
    • 上升和下降
    • 數字或非數字
  • 搜尋中
    • 嵌套搜尋詞
    • 組合搜尋詞
    • 模糊文字搜尋
    • 座標、整數、長整型、字串、文本
  • 指示與分析
    • N-gram
    • 邊 N 元語法
    • 英文單字
    • 詞幹擷取
    • 停用詞刪除
  • 結果過濾

常問問題

• 為什麼這麼難用？

  這不是 DBMS。

  這是一個可以建構 DBMS 的引擎；因此，如果不在上面建立另一個抽象層，就很難直接使用。

• 我可以使用物件而不是位元組數組嗎？

  是的，您必須使用您選擇的庫對它們進行序列化/反序列化。

  CodecSerializer 可讓您使用每個資料版本的編解碼器來實現版本化資料。請注意，它為每個值多使用 1 到 4 個位元組來儲存版本。

• 為什麼每個資料庫部分都有快照功能？

  由於 RocksDB 和 lucene 索引是不同的庫，因此您無法自動拍攝每個資料庫的快照。

  通用快照必須作為每個資料庫快照的集合來實作。

• CavalliumDB 引擎適合您的專案嗎？

  不。

  該引擎很大程度上沒有文件記錄，並且不提供廣泛的測試。

範例

在src/example/java你可以找到一些（醜陋的）例子。