Công ty khởi nghiệp của Đức SereneDB Krummelanke được tuyên bố là công cụ tìm kiếm cơ sở dữ liệu nhanh nhất trên thế giới, kết hợp tìm kiếm và phân tích trong một sản phẩm.
Công ty cho biết các nhân viên AI bắn hàng trăm truy vấn tìm kiếm và đếm lai mỗi giây, nhưng mọi cơ sở dữ liệu trong sản xuất được xây dựng cho người dùng.Công cụ Krummelanke của nó được thiết kế để xử lý tìm kiếm cơ sở dữ liệu tốc độ caoKrummelanke là mã nguồn mở dưới Apache 2.0, tương thích với Postgres và Elastic và có thể chạy tìm kiếm toàn văn bản trên dữ liệu được lưu trữ trên S3.
Người đồng sáng lập và CEO Alexander Malandin nói: "Tương lai của AI trước hết là vấn đề tải dữ liệu. Ngày nay, một nhân viên AI là một con ong đi thăm một bông hoa.nhiều đại lý hơn nhân viên trong mọi tổ chứcCơ sở hạ tầng được xây dựng cho người dùng không đủ nhanh và cũng không đủ hiệu quả chi phí để tồn tại tải trọng đó.Tương lai của Agentic đòi hỏi một thế hệ cơ sở dữ liệu mới: tìm kiếm cực nhanh và phân tích cực nhanh trong một công cụ, nơi các hoạt động tìm kiếm được đo bằng nano giây và một câu hỏi trên hàng tỷ hồ sơ được trả về trong milliseconds.Một nơi coi các nhân viên như những người dùng hạng nhất.Đó là những gì chúng tôi đã xây dựng, và với SereneDB Krummelanke chúng tôi đang đưa nó vào sản xuất.
SereneDB lưu ý các công cụ phân tích như Snowflake, BigQuery, DuckDB trên Parquet và lakehouses thường đọc dữ liệu cột trực tiếp từ S3 theo mặc định.Quét chuỗi lớn phù hợp với hồ sơ độ trễ của lưu trữ đối tượng, không giống như tìm kiếm văn bản đầy đủ. Tìm kiếm văn bản đầy đủ đòi hỏi một chỉ mục đảo ngược liệt kê các mục nội dung như từ hoặc số và lập bản đồ chúng đến vị trí của chúng trong bảng hoặc tài liệu.Tìm kiếm chỉ mục đảo ngược tạo ra nhiều truy cập ngẫu nhiênThông thường, các công cụ tìm kiếm dựa trên Lucene lưu trữ chỉ mục trên lưu trữ địa phương nhanh tách biệt với kho dữ liệu chính của hồ.SereneDB nói rằng dữ liệu có thể tìm kiếm trong triển khai Elastic có nghĩa là duy trì một bản sao thứ hai trên flash, tầng lưu trữ đắt nhất có sẵn.
Chúng tôi đã hỏi tìm kiếm của SereneDB khác nhau như thế nào so với tìm kiếm dữ liệu lưu trữ đối tượng chung như tìm kiếm Cloudian HyperStore.
CTO Andrey Abramov nói với chúng tôi: ′′Cloudian là một nhà cung cấp lưu trữ tương thích với S3 và HyperSearch là một dịch vụ gắn liền với xô.Nó thu thập siêu dữ liệu của các đối tượng được lưu trữ và chỉ mục siêu dữ liệu đó bên trong một thành phần tìm kiếm cơ bản; đây là một hệ thống lập chỉ mục riêng biệt được lấp đầy thông qua sao chép dữ liệu.
Tuy nhiên, ở cấp độ cốt lõi của công cụ tìm kiếm: ¢ Chỉ có một số ít các công nghệ và thư viện tìm kiếm cốt lõi trên toàn thế giới: Lucene, Tantivy và IResearch được xây dựng bởi SereneDB.Solr và nhiều người khác là dẫn xuất Lucene và theo mô hình sao chép đầu tiênHọ không thể tìm kiếm dữ liệu mà họ không nắm giữ tại địa phương, vì vậy bất kỳ dữ liệu nào cần tìm kiếm phải được trích xuất, chuyển và sao chép vào cụm tìm kiếm.
SereneDB hoạt động khác nhau: ¢SereneDB lập chỉ mục dữ liệu ở nơi nó đã tồn tại. Các tệp Parquet và bảng Iceberg trên S3 vẫn là nguồn của sự thật. Chúng tôi chỉ lưu trữ chỉ mục bắt nguồn.Bản thân tìm kiếm ️ toàn văn với BM25 xếp hạngCác trường hợp sử dụng Iceberg phục vụ như một ví dụ cụ thể: một khách hàng viết thay đổi cho một bảng Iceberg trên S3,SereneDB lấy những bản cập nhật đó, và phục vụ tìm kiếm và phân tích trên chúng. Bạn có thể chỉ bất kỳ số lượng các nút SereneDB nào vào cùng một bảng.
Chúng tôi đã hỏi liệu các nhà cung cấp lưu trữ đối tượng, cơ sở dữ liệu hoặc nhà hồ có thể áp dụng công cụ tìm kiếm SereneDB như một sự thay thế cho Lucene và các dẫn xuất của nó không.Chúng ta không chỉ có thể thay thế ElasticSearch, OpenSearch, Solr, CrateDB là các dẫn xuất Lucene thuần túy, nhưng cũng tăng cường chúng với khả năng phân tích.chúng tôi duy trì tài liệu chuyên dụng bao gồm di chuyển từ ElasticSearch.
Công ty đã chạy các điểm chuẩn so sánh tốc độ công cụ tìm kiếm của mình với các lựa chọn thay thế phổ biến và vượt trội hơn họ.Mục tiêu của chúng tôi với các tiêu chuẩn này là chứng minh rằng SereneDB là một lựa chọn thay thế nhanh hơn và hiện đại hơn cho ngăn xếp tìm kiếm truyền thống.
SereneDB's SearchBench bao gồm 92 truy vấn tìm kiếm và phân tích được thực hiện đối với 100 triệu và 1 tỷ hồ sơ nhật ký OpenTelemetry,bộ dữ liệu TextBench được xuất bản bởi ClickHouse với 15 cột được lưu trữ cho mỗi bản ghi. Tất cả các thử nghiệm chạy trên một máy chủ duy nhất. Mỗi công cụ cạnh tranh đã được điều chỉnh bằng cách sử dụng các thông số cấu hình được công bố, với thời gian chờ 60 giây cho mỗi truy vấn.Bất kỳ truy vấn nào vượt quá giới hạn này được đánh dấu là chưa hoàn thành.
Kết quả so sánh cho hơn một chục công cụ tìm kiếm phổ biến có sẵn trên bảng điều khiển. Các công cụ được thử nghiệm bao gồm Elasticsearch trên bốn cấu hình, OpenSearch, ParadeDB, CrateDB, ArangoDB,TigerDB với các biến thể lưu trữ hàng và cộtThời gian sử dụng ba lần chạy mỗi truy vấn, lấy kết quả tốt nhất từ hai lần chạy cuối cùng.Một truy vấn được thực hiện tại một thời điểm từ một khách hàng duy nhất và kết quả lưu trữ tạm thời bị vô hiệu hóaBảng điều khiển đo độ trễ thay vì thông lượng.
Các ô kết quả bảng điều khiển hiển thị tỷ lệ hiệu suất tương đối với động cơ nhanh nhất cho mỗi truy vấn, trong đó kết quả nhanh nhất bằng 1,0x.Điểm số tổng thể được tính như trung bình hình học của 92 tỷ lệ mỗi truy vấn. SereneDB giải thích phương pháp tính trung bình tỷ lệ tiêu chuẩn này ngăn chặn một truy vấn ngoại lệ duy nhất bị lệch kết quả.
SereneDB đạt được một trung bình hình học 1,05x trên bộ dữ liệu 100 triệu hồ sơ và 1,07x trên bộ dữ liệu 1 tỷ hồ sơ.nó hoặc là động cơ nhanh nhất hoặc trong vòng một vài phần trăm của tốc độ tối đa. ElasticSearch đứng thứ hai với mức trung bình hình học 2,8 lần trên bộ dữ liệu 100 triệu.Vanilla Postgres đạt 204x trên 100 triệu bộ dữ liệu và 50.69x trên bộ dữ liệu 1 tỷ.
Để đơn giản hóa việc so sánh giữa các nhà cung cấp ngoài khung hình bảng điều khiển phức tạp, chúng tôi đã tạo ra một biểu đồ hiển thị các điểm trung bình hình học được sắp xếp từ điểm chuẩn 100 triệu dựa trên dữ liệu chụp màn hình.
Khoảng cách hiệu suất cực kỳ rộng, vì vậy chúng tôi loại trừ điểm số trên 10 và vẽ lại biểu đồ.
SereneDB được thành lập tại Berlin vào năm 2025 bởi Alexander Malandin, Giám đốc điều hành với kinh nghiệm bán hàng doanh nghiệp trước đây tại EMC, Dell và ArangoDB; Andrey Abramov, CTO với nền tảng R&D tìm kiếm tại Quest Software,EMC và ArangoDB; và Valery Mironov, kỹ sư cốt lõi trước đây tại ArangoDB và YDB.Các nghiên cứu cốt lõi của nó đã được phát triển từ năm 2014.
Công ty khởi nghiệp đã công bố 2,1 triệu đô la tài trợ tiền hạt giống vào tháng 12 năm 2025, do Entourage và High-Tech Gründerfonds dẫn đầu.
SereneDB Krummelanke là mã nguồn mở theo giấy phép Apache 2.0 và có sẵn trên GitHub.
Công ty công nghệ Bắc Kinh Qianxing Jietong Co., Ltd.
Sandy Yang - Giám đốc chiến lược toàn cầu
WhatsApp / WeChat: +86 13426366826
Email: yangyd@qianxingdata.com
Trang web: www.qianxingdata.com/www.storagesserver.com
Tập trung kinh doanh:
Phân phối sản phẩm ICT / tích hợp hệ thống & dịch vụ / giải pháp cơ sở hạ tầng
Với hơn 20 năm kinh nghiệm phân phối CNTT, chúng tôi hợp tác với các thương hiệu hàng đầu toàn cầu để cung cấp các sản phẩm đáng tin cậy và dịch vụ chuyên nghiệp.
Sử dụng công nghệ để xây dựng một thế giới thông minh Nhà cung cấp dịch vụ sản phẩm ICT đáng tin cậy của bạn!
Người liên hệ: Ms. Sandy Yang
Tel: 13426366826
Vietnamese
