LatticeDB: Cơ sở dữ liệu đồ thị nhúng mã nguồn mở, 'SQLite cho graph database'

LatticeDB là một cơ sở dữ liệu đồ thị thuộc tính (property-graph) nhúng, mã nguồn mở, lưu trữ toàn bộ dữ liệu trong một file duy nhất — không cần máy chủ, không cần cấu hình. Điểm đặc biệt của dự án này là khả năng kết hợp ba loại truy vấn trên cùng một bộ dữ liệu: duyệt quan hệ (graph traversal), tìm kiếm tương tự vector (HNSW) và tìm kiếm toàn văn BM25, tất cả trong một ngôn ngữ truy vấn duy nhất.

Với thiết kế nhúng (embedded) theo mô hình single-writer, LatticeDB được tối ưu cho các ứng dụng local-first như Graph RAG, bộ nhớ tác nhân AI (agent memory), hoặc các công cụ quản lý tri thức cá nhân — những tác vụ cần khai thác mối quan hệ phức tạp giữa các thực thể mà cơ sở dữ liệu quan hệ truyền thống xử lý kém hiệu quả.

Vì sao LatticeDB đáng chú ý?

Hệ sinh thái cơ sở dữ liệu đang chứng kiến sự trỗi dậy mạnh mẽ của các giải pháp nhúng (embedded) nhờ xu hướng ứng dụng local-first và AI biên (edge AI). LatticeDB nổi bật bởi sự kết hợp hiếm có giữa đồ thị + vector + toàn văn trong một engine duy nhất, thay vì phải sử dụng nhiều công cụ khác nhau.

Kiến trúc và hiệu năng

LatticeDB được viết bằng ngôn ngữ Zig, không phụ thuộc thư viện ngoài. Kiến trúc của nó gồm ba lớp chính:

• Graph engine: Lưu trữ các node và cạnh có nhãn, hỗ trợ truy vấn quan hệ qua ngôn ngữ Cypher (một tập con).
• Vector index: Sử dụng thuật toán HNSW để tìm kiếm độ tương tự, hỗ trợ các tác vụ RAG.
• Full-text index: Dựa trên thuật toán BM25, cho phép tìm kiếm từ khóa truyền thống.

Về hiệu năng, nhà phát triển công bố kết quả benchmark trên Apple M1, đơn luồng:

• Tra cứu node: 0,13 μs (7,9 triệu ops/giây)
• Tìm kiếm vector trên 1 triệu vector: 0,83 ms với độ chính xác 100%

Ngôn ngữ truy vấn thống nhất

Điểm mạnh của LatticeDB là cho phép kết hợp cả ba loại tìm kiếm trong một câu truy vấn Cypher duy nhất. Ví dụ, bạn có thể tìm các đoạn văn bản tương tự về mặt ngữ nghĩa, duyệt đến tài liệu chứa nó, rồi đến tác giả — tất cả trong một lần gọi:

MATCH (chunk:Chunk)-[:PART_OF]->(doc:Document)-[:AUTHORED_BY]->(author:Person)
WHERE chunk.embedding <$query_vector>
LIMIT 10

Hỗ trợ đa ngôn ngữ lập trình

LatticeDB cung cấp một C API sạch và các binding cho ba ngôn ngữ phổ biến:

• Python: pip install latticedb
• TypeScript / Node.js: npm install @hajewski/latticedb
• Go: Hỗ trợ qua cgo, xem hướng dẫn trong bindings/go/README.md

Khi nào nên — và không nên — sử dụng LatticeDB?

Các trường hợp sử dụng phù hợp

• Dữ liệu cục bộ có liên kết: Ghi chú, tài liệu, danh mục, đồ thị trích dẫn, đồ thị thực thể.
• Kết hợp đồ thị + truy xuất thông tin: Cần duyệt quan hệ, tìm kiếm ngữ nghĩa và tìm kiếm từ khóa trên cùng một tập dữ liệu.
• Công cụ tri thức cục bộ: Ứng dụng nhúng cần cấu trúc đồ thị mà không muốn chạy máy chủ riêng.
• Agent memory và RAG pipelines: Một lớp tác vụ điển hình xây dựng trên nền đồ thị/vector/văn bản.
• Phát triển cục bộ: Giải pháp nhẹ hơn Neo4j hoặc Weaviate cho việc tạo mẫu nhanh trên một máy.

Khi nào nên chọn công cụ khác?

"LatticeDB nhanh, nhưng tốc độ không phải là tất cả."

• Cần nhiều ứng dụng ghi đồng thời: LatticeDB theo mô hình single-writer, chỉ một process mở file và sở hữu nó. Nếu cần nhiều client kết nối qua mạng, hãy dùng Neo4j, PostgreSQL.
• Dữ liệu thuần dạng bảng (tabular): Nếu dữ liệu khớp tự nhiên với hàng và cột, một cơ sở dữ liệu quan hệ như SQLite hoặc PostgreSQL sẽ đơn giản và nhanh không kém.
• Cần mở rộng ra nhiều máy: LatticeDB chỉ dùng một file trên một máy. Nếu cần sharding, replication hay truy vấn phân tán, hãy chọn Neo4j cluster, Dgraph hoặc Neptune.
• Cần đầy đủ ngôn ngữ Cypher: LatticeDB mới hỗ trợ phần lớn Cypher, chưa có OPTIONAL MATCH và thủ tục CALL.
• Cần hệ sinh thái và công cụ trưởng thành: Neo4j có công cụ trực quan hóa, dashboard quản trị, driver đa ngôn ngữ. LatticeDB còn non trẻ và tối giản.

Lộ trình và tương lai

Đây là phiên bản 0.10.0, dự án vẫn trong giai đoạn phát triển tích cực. Các bản phát hành gần đây tập trung vào cải thiện hiệu năng, làm sạch bề mặt API binding và bổ sung tài liệu. Được phát hành theo giấy phép MIT, LatticeDB là một lựa chọn thú vị cho cộng đồng nhà phát triển đang tìm kiếm giải pháp lưu trữ dữ liệu liên kết cục bộ nhẹ nhàng.

Kết luận

LatticeDB đang lấp đầy một vị trí khá trống trải: một giải pháp graph database nhúng, dễ dùng như SQLite nhưng mạnh mẽ cho các tác vụ tri thức hiện đại. Với xu hướng AI và dữ liệu cá nhân hóa đang lên ngôi, các dự án như LatticeDB sẽ ngày càng đóng vai trò quan trọng trong hệ sinh thái phát triển phần mềm Việt Nam — đặc biệt cho những ai muốn xây dựng ứng dụng local-first không phụ thuộc hạ tầng đám mây.

Bạn có thể tìm hiểu thêm và đóng góp cho dự án tại kho mã nguồn: github.com/jeffhajewski/latticedb