Zilliz Cloud добавляет поиск по диапазону

Разработчики базы данных Zilliz Cloud добавили в Zilliz Cloud новые функции, включая поиск по диапазону, многопользовательский доступ и RBAC, а также в десять раз увеличили производительность поиска и индексирования.

Zilliz Cloud построена на базе векторной базы данных Milvus с открытым исходным кодом. Zilliz - это платформа векторной базы данных, которая может использоваться для хранения, индексирования и поиска данных в векторах. Zilliz была разработана частью команды разработчиков векторной базы данных Milvus.

Milvus был разработан для хранения, индексации и управления массивными векторами встраивания, генерируемыми глубокими нейронными сетями и другими моделями машинного обучения (ML). В отличие от существующих реляционных баз данных, которые в основном работают со структурированными данными по заранее заданному образцу, Milvus спроектирован снизу вверх для работы с векторами вкраплений, преобразованными из неструктурированных данных.

Неструктурированные данные преобразуются в векторы с помощью методов встраивания, и Milvus (и Zilliz) способны анализировать корреляцию между двумя векторами, вычисляя расстояние их сходства. Если два вектора встраивания очень похожи, это означает, что и исходные источники данных тоже похожи.

Повышенная производительность новой версии Zilliz Cloud по сравнению с Milvus обусловлена использованием графовых индексов Hierarchical Navigable Small World (HNSW). Большинство векторных баз данных теперь поддерживают HNSW, поэтому добавление этой функции было признано ключевым для Zilliz.

Версия HNSW, которая была включена в Zilliz, - это Approximate Nearest Neighbor Search (ANNS). Он используется в Zilliz Cardinal, многопоточном высокоэффективном механизме векторного поиска, который работает с различными форматами данных, включая FP32, FP16 и BF16.

Zilliz Cloud также теперь доступен на Google Cloud Marketplace, наряду с существующей поддержкой AWS и Azure. По словам команды Zilliz, поддержка Google Cloud устраняет необходимость в предварительном планировании бюджета и принятии обязательств, позволяя пользователям масштабировать свои кластеры и платить по мере необходимости.

Среди других улучшений новой версии - повышение точности запросов, добавление метрики косинусного сходства, поиск по диапазону и апсерт.

Zilliz Cloud поставляется с унифицированным клиентом Milvus и предлагает миграцию данных между Milvus и Zilliz Cloud одним щелчком мыши. Новый выпуск также предлагает гранулярный контроль доступа на основе ролей (RBAC) и комплексные ключи API для повышения безопасности.

Zilliz Cloud доступен уже сейчас.