Presentazione di Milvus 2.5: ricerca full-text integrata, ottimizzazione avanzata delle query e molto altro 🚀
Siamo entusiasti di annunciare il rilascio di Milvus 2.5, un passo significativo nel nostro percorso per costruire la soluzione più completa al mondo per tutti i carichi di lavoro di ricerca. Sebbene Milvus sia noto per le sue potenti capacità di ricerca per similarità vettoriale, la nostra visione va oltre i vettori. Crediamo che il futuro della ricerca risieda nella combinazione fluida di diversi paradigmi di ricerca - ricerca semantica, ricerca per parole chiave e filtraggio tradizionale - il tutto in un'unica piattaforma unificata.
Questo rilascio segna una tappa importante con l'introduzione della ricerca full-text integrata, avvicinandoci a questa visione. Insieme a ottimizzazioni avanzate delle query e a capacità di elaborazione dei dati migliorate, Milvus 2.5 rappresenta il nostro impegno nel rendere le operazioni di ricerca complesse semplici ed efficienti per gli sviluppatori.
Ricerca Full-Text Integrata: Potente Elaborazione del Testo Resa Semplice 🔍
La funzionalità principale di Milvus 2.5 è la nostra nuova ricerca full-text integrata alimentata da Sparse-BM25. Questa aggiunta è più di una semplice nuova funzionalità: è un elemento fondamentale per le applicazioni di ricerca di nuova generazione. Combinando la ricerca per similarità vettoriale con potenti capacità di elaborazione del testo, puoi costruire sistemi di ricerca più sofisticati per comprendere meglio l'intento dell'utente. Che tu stia lavorando con documentazione tecnica, contenuti specifici di dominio o dati testuali generali, puoi sfruttare la comprensione semantica e la precisione delle parole chiave in un unico sistema.
Ciò che rende tutto questo particolarmente potente è la sua semplicità: ora puoi inserire direttamente testo grezzo senza generare in anticipo embedding vettoriali. Milvus gestisce internamente la complessità, utilizzando analyzer integrati per elaborare il tuo testo e aggiornando in tempo reale le informazioni statistiche BM25 man mano che aggiungi nuovi dati. Questo garantisce un'accuratezza di ricerca ottimale riducendo significativamente la complessità di implementazione.
Elaborazione del Testo e dei Dati Migliorata 📊
Corrispondenza del Testo
La nostra nuova capacità di corrispondenza del testo sfrutta gli analyzer e l'indicizzazione di Tantivy per una corrispondenza precisa del linguaggio naturale. Questa funzionalità è particolarmente preziosa quando si combina la corrispondenza del testo con la ricerca per similarità vettoriale, consentendoti di filtrare i risultati di ricerca in base a termini specifici prima di eseguire i calcoli di similarità vettoriale.
Indice Bitmap
Il nuovo indice Bitmap accelera le ricerche su campi con un numero limitato di valori univoci (campi a bassa cardinalità). Ad esempio, quando si effettuano ricerche nei dati degli utenti con campi come "gender" con solo pochi valori possibili, gli indici Bitmap possono accelerare significativamente le prestazioni delle query.
Valori Nullable e Predefiniti
Abbiamo aggiunto il supporto per proprietà nullable e valori predefiniti nei campi scalari, offrendo una maggiore flessibilità nella gestione dei dati. Questa funzionalità semplifica la migrazione dei dati da altri sistemi di database e aiuta a gestire casi d'uso reali in cui i valori dei campi potrebbero essere sconosciuti o richiedere impostazioni predefinite.
Nuove Funzionalità Beta ⚡
Una funzionalità beta di spicco in questo rilascio è la nostra nuova WebUI per la Gestione dei Cluster, progettata per affrontare la complessità della gestione di distribuzioni Milvus su larga scala. Questa dashboard completa monitora automaticamente lo stato del sistema, tiene traccia delle metriche di prestazione e ti avvisa di potenziali problemi prima che impattino sulle tue applicazioni. Quando il sistema rileva eventuali pattern non sani, avrai accesso diretto agli esperti Milvus per una rapida risoluzione.
Stiamo anche testando Clustering Compaction, che aiuta a ottimizzare l'archiviazione e il recupero in grandi raccolte ridistribuendo i dati in base a campi scalari specificati. Queste funzionalità sono disponibili per i test e accogliamo con piacere il tuo feedback mentre continuiamo a perfezionarle.
Funzionalità aggiuntive e miglioramenti 🌟
Questa release include numerosi miglioramenti per potenziare la tua esperienza con Milvus. Abbiamo migliorato la nostra implementazione HNSW tramite l'integrazione con Faiss, supportando più metodi di quantizzazione (SQ, PQ e PRQ) per prestazioni e richiamo migliori.
Altri miglioramenti degni di nota includono il supporto IPv6, funzionalità di importazione bulk CSV e un nuovo nodo di streaming per i servizi di Write-Ahead Logging. Abbiamo inoltre ottimizzato le eliminazioni su larga scala, effettuato l'upgrade a ETCD 3.5.16 e Pulsar 3.0.7 LTS per una maggiore sicurezza, e introdotto Local Storage V2 per migliorare l'efficienza di caricamento e query.
Partecipa al nostro workshop pratico! 🎓
Pronto a esplorare queste nuove funzionalità? Puoi consultare le nostre note di rilascio dettagliate o partecipare al nostro workshop tecnico, dove dimostreremo come implementare la ricerca full-text, configurare indici efficienti e sfruttare queste nuove capacità nelle tue applicazioni. I nostri ingegneri ti guideranno attraverso esempi pratici e best practice per ottenere il massimo da Milvus 2.5.
E ci sono altre novità entusiasmanti all'orizzonte: Milvus 2.5 è destinato all'anteprima pubblica in Zilliz Cloud a febbraio 2025. Resta sintonizzato per essere tra i primi a sperimentare queste potenti funzionalità in un ambiente completamente gestito, dove potrai concentrarti sulla creazione delle tue applicazioni mentre noi ci occupiamo dell'infrastruttura.
Continua a leggere
From Vector Database to Vector Lakebase
Zilliz offers a fully managed Vector Lakebase powered by Milvus, unifying real-time vector search, lake-scale discovery, and Al data operations.
The AWS Outage Was a Wake-Up Call for Vector Database Cross-Region Disaster Recovery
Zilliz Cloud Had the Answer Before the Crisis. Zilliz Cloud is the world's first vector database with native cross-region disaster recovery.
Zilliz Cloud Now Available in Azure North Europe: Bringing AI-Powered Vector Search Closer to European Customers
The addition of the Azure North Europe (Ireland) region further expands our global footprint to better serve our European customers.