Zilliz Cloud Enterprise Vector Search impulsa la IA de alto rendimiento en AWS
Esta publicación se publicó inicialmente en AWS y se vuelve a publicar aquí con permiso.
A medida que las organizaciones implementan arquitecturas de generación aumentada por recuperación (RAG) y aplicaciones de inteligencia artificial (IA) multimodal, la demanda de búsqueda vectorial de alto rendimiento se ha vuelto importante. Las empresas que aprovechan Amazon Bedrock y otros modelos fundacionales requieren una infraestructura de búsqueda vectorial escalable y sólida para alinearse con sus ambiciones de IA. Zilliz Cloud en Amazon Web Services (AWS) ofrece un servicio de base de datos vectorial totalmente gestionado que proporciona búsqueda segura, conforme y rápida impulsada por IA a escala empresarial. Aunque muchas soluciones funcionan en desarrollo, los entornos de producción exigen un rendimiento constante bajo cargas de trabajo intensas mientras mantienen estrictos requisitos de seguridad.
Esta publicación explora cómo Zilliz Cloud en AWS cumple estos requisitos, ofreciendo rendimiento, seguridad y escalabilidad para iniciativas de IA empresariales.
Escalado de la búsqueda vectorial a miles de millones con Zilliz Cloud
Diseñado específicamente para cargas de trabajo de IA críticas en AWS, Zilliz Cloud elimina la complejidad operativa al tiempo que ofrece el rendimiento, la seguridad y la escalabilidad que exigen los clientes empresariales.
Cardinal, nuestro motor de búsqueda vectorial propietario, impulsa el servicio y establece nuevos puntos de referencia de rendimiento en la industria. Cardinal ofrece una eficiencia sin precedentes con un rendimiento de consultas hasta 10 veces mayor y una creación de índices 3 veces más rápida en comparación con alternativas de código abierto. Este rendimiento revolucionario permite a los clientes de AWS escalar sus operaciones de búsqueda vectorial a miles de millones de embeddings mientras optimizan tanto el coste como la latencia. Ya sea que esté implementando sistemas RAG en toda la empresa o búsqueda de similitud en tiempo real, Zilliz Cloud proporciona la infraestructura lista para producción para impulsar sus iniciativas de IA más exigentes.
Optimización de 3 capas
Cardinal logra su rendimiento y eficiencia excepcionales mediante una pila integrada verticalmente con tres capas clave de optimización:
Algoritmos de índice avanzados: Al combinar la indexación Inverted File (IVF) con enfoques basados en grafos como Hierarchical Navigable Small World (HNSW), Cardinal ofrece alta recuperación y baja latencia, incluso en escenarios complejos como la búsqueda filtrada y la búsqueda durante la ingesta.
Ingeniería meticulosa: Cardinal implementa asignadores de memoria personalizados, programación compatible con NUMA y canalizaciones de ejecución multihilo ajustadas con precisión para un rendimiento de alto throughput y baja latencia en entornos de producción.
Mejoras del kernel conscientes del hardware: Optimizado para procesadores AWS Graviton basados en ARM, Cardinal utiliza aceleración Single Instruction, Multiple Data (SIMD), fijación de CPU y programación inteligente de E/S para reducir significativamente los ciclos de CPU y mejorar el throughput.
Inteligencia incorporada para Zero-DevOps
Zilliz Cloud ofrece tanto alto rendimiento como funciones de automatización inteligente:
AutoIndex: Aprovechando el aprendizaje automático, AutoIndex selecciona automáticamente el tipo de índice y la configuración óptimos en función de las características de los datos y el estado del sistema. Esto garantiza el mejor equilibrio entre precisión de búsqueda y latencia sin intervención humana.
Auto-Scaling: El cómputo y el almacenamiento escalan elásticamente según las demandas de carga de trabajo en tiempo real, garantizando una gestión fluida de los picos de tráfico y las ingestas masivas de datos.
Funciones listas para empresas
High Availability: Nuestro diseño de sistema de alta disponibilidad distribuye las consultas automáticamente entre réplicas, reduciendo la latencia y garantizando al mismo tiempo el funcionamiento continuo durante interrupciones de zona. Las réplicas se sincronizan de forma inteligente entre zonas de disponibilidad de AWS para lograr la máxima resiliencia.
Observabilidad integral: La integración profunda con Prometheus permite la supervisión en tiempo real mediante 41 alertas en 26 métricas, cubriendo todo, desde la salud de la infraestructura hasta las operaciones de datos. Los equipos pueden gestionar de forma proactiva su infraestructura de búsqueda vectorial con visibilidad completa de los patrones de rendimiento.
Migración de datos sin interrupciones: Las rutas de migración bien definidas permiten a los usuarios de Zilliz Cloud migrar datos desde otras fuentes como Pinecone y Elasticsearch con un solo clic. La función de migración también admite la transformación automática de esquemas para preservar la integridad de los datos mientras se desbloquean las capacidades mejoradas de Zilliz Cloud.
Infraestructura global y seguridad: Disponible en 7 regiones de AWS en EE. UU., Europa y APAC, Zilliz Cloud ofrece rendimiento de baja latencia a nivel global. La seguridad está integrada con autenticación basada en Auth0 que admite SSO empresarial a través de Okta, GitHub y Google OAuth.
Con su arquitectura nativa de la nube y su motor de índices propietario Cardinal, Zilliz Cloud ofrece velocidad, elasticidad y simplicidad incomparables para la búsqueda vectorial a escala de miles de millones de vectores.
Profundamente integrado con la tecnología de AWS
Las infraestructuras y los servicios en la nube fiables que proporciona AWS son clave para el éxito de Zilliz Cloud al ofrecer búsqueda vectorial a escala de miles de millones en producción sin preocuparse por los detalles de hardware de bajo nivel. Zilliz Cloud está profundamente integrado con la tecnología de AWS para mejorar el rendimiento, la fiabilidad y la seguridad:
Amazon EKS: Milvus es nativo de Kubernetes. Milvus totalmente gestionado en Zilliz Cloud implementa microservicios utilizados para la búsqueda vectorial, la indexación y la gestión de metadatos en EKS, el entorno Kubernetes gestionado de AWS, para una implementación simplificada y alta disponibilidad.
Procesadores AWS Graviton: Ofrecen una relación rendimiento-coste superior utilizando una arquitectura basada en ARM optimizada para cargas de trabajo intensivas en cómputo, como la creación de índices.
AWS PrivateLink: Proporciona conectividad segura y privada entre la VPC del cliente y los servidores de bases de datos vectoriales en la VPC de Zilliz Cloud, sin pasar por la internet pública.
Infraestructura global de AWS: Aprovecha la red global de regiones y zonas de disponibilidad de AWS para ofrecer experiencias de búsqueda de baja latencia en todo el mundo.
Implementación flexible para cada requisito de seguridad
La oferta SaaS totalmente gestionada de Zilliz Cloud admite la mayoría de las cargas de trabajo empresariales. Sin embargo, las organizaciones en sectores altamente regulados suelen requerir un control más estricto sobre la residencia de los datos y el acceso a la infraestructura. Con su oferta bring your own cloud (BYOC), la búsqueda vectorial de alto rendimiento se implementa directamente en tu cuenta de AWS y VPC, garantizando así la soberanía completa de los datos y evitando cualquier exposición a infraestructura compartida o endpoints públicos.
¿Por qué Zilliz Cloud BYOC?
Aunque la IA generativa ha aportado importantes mejoras en productividad y personalización, las restricciones regulatorias pueden hacer que las implementaciones SaaS tradicionales sean inviables. Las alternativas on-premises, por su parte, suelen conllevar una complejidad operativa prohibitiva.
Zilliz Cloud BYOC cierra esa brecha, dando a las empresas la capacidad de ejecutar la búsqueda vectorial cerca de sus datos, dentro de su propio entorno de nube seguro. Elimina la fricción de cumplimiento sin sacrificar rendimiento ni escalabilidad. Los beneficios clave de BYOC incluyen:
Los datos permanecen dentro de tu entorno de AWS: Cumpliendo incluso los requisitos más estrictos de soberanía y residencia de datos
Las operaciones se gestionan de forma segura mediante servicios nativos de AWS: Incluidos PrivateLink, IAM y VPC peering
Sin salida pública de datos: Las cargas de trabajo de IA se ejecutan donde residen los datos, eliminando las preocupaciones de seguridad derivadas de que los datos crucen redes públicas.
Cómo funciona Zilliz Cloud BYOC en AWS
La Figura 1 muestra cómo Zilliz Cloud BYOC tiene una arquitectura cuidadosamente diseñada para lograr el equilibrio entre control y soberanía de los datos.
Zilliz Cloud BYOC on AWS Architecture
El plano de control, gestionado por Zilliz y alojado en su cuenta de AWS, instruye tareas operativas como actualizaciones de software y escalado dentro de la VPC de Zilliz. Mientras tanto, el plano de datos, desplegado en la cuenta de AWS del cliente, ejecuta todos los servicios de búsqueda vectorial, garantizando un aislamiento completo y proporcionando visibilidad total al cliente.
Este diseño es posible gracias a las capacidades de seguridad de AWS:
AWS PrivateLink garantiza que la comunicación entre el plano de control de Zilliz y su plano de datos permanezca privada y segura, sin cruzar la Internet pública.
Los roles de IAM entre cuentas permiten un acceso seguro y con privilegios mínimos para el aprovisionamiento y el escalado.
Amazon S3 se utiliza para almacenar registros de auditoría y metadatos operativos dentro de su entorno, garantizando el cumplimiento de las políticas internas de gobernanza de datos.
Impacto empresarial en el mundo real
Las capacidades de búsqueda vectorial de alto rendimiento de Zilliz Cloud proporcionan un impacto empresarial significativo para los clientes empresariales de AWS. Con búsquedas de latencia inferior a 10 ms en miles de millones de vectores y cumplimiento estricto, las organizaciones pueden implementar aplicaciones de IA a escalas sin precedentes.
Filevine, una de las principales empresas SaaS de IA legal con sede en EE. UU., utiliza Zilliz Cloud para hacer que enormes cantidades de documentos legales sean rápidamente buscables, reduciendo el tiempo de investigación de horas a minutos, por ejemplo. Esta mejora está impulsada por la mejora de rendimiento de 10 veces de Cardinal y funciones como la optimización AutoIndex.
Al elegir Zilliz Cloud en AWS, las organizaciones pueden escalar con confianza sus operaciones de búsqueda vectorial y centrarse en la innovación, en lugar de en la gestión de la infraestructura.
Comience con la base de datos vectorial Zilliz Cloud en AWS
Ya sea que esté creando su primera aplicación de IA o escalando sistemas existentes para gestionar miles de millones de vectores, Zilliz Cloud proporciona el rendimiento, la fiabilidad y la seguridad que exige la IA empresarial. Comience a usar Zilliz Cloud hoy a través de AWS Marketplace, o si desea iniciar una prueba gratuita , explorar opciones BYOC o contactar con Zilliz a través de AWS. Transforme sus aplicaciones de IA con una búsqueda vectorial creada para la escala empresarial, que ofrece el rendimiento que sus usuarios esperan con la seguridad que su negocio requiere.
Zilliz se complace en estar entre los primeros socios de lanzamiento de los nuevos agentes y herramientas de IA de AWS Marketplace, aportando potentes capacidades de bases de datos vectoriales a los clientes de AWS.
Jiang ChenJiang is currently Director of Technical GTM at Zilliz. He has years of experience in data infrastructures and cloud security. Before joining Zilliz, he had previously served as a tech lead and product manager at Google, where he led the development of web-scale semantic understanding and search indexing that powers innovative search products such as short video search. He has extensive industry experience handling massive unstructured data and multimedia content retrieval. He has also worked on cloud authorization systems and research on data privacy technologies. Jiang holds a Master's degree in Computer Science from the University of Michigan.
Yuantao ZhangYuantao Zhang is Senior Partner Solution Architect at AWS.
Fei LangFei Lang is Principal Partner Solution Architect at AWS.
Sigue leyendo
What Is a Vector Lakebase?
A Vector Lakebase is a unified, lake-native data architecture for AI that combines vector-database-grade serving with open lake storage, reusable lake-level indexes, and a shared semantic layer.
Why Teams Are Migrating from Weaviate to Zilliz Cloud — and How to Do It Seamlessly
Explore how Milvus scales for large datasets and complex queries with advanced features, and discover how to migrate from Weaviate to Zilliz Cloud.
Will Amazon S3 Vectors Kill Vector Databases—or Save Them?
AWS S3 Vectors aims for 90% cost savings for vector storage. But will it kill vectordbs like Milvus? A deep dive into costs, limits, and the future of tiered storage.