Nuevo en Zilliz Cloud: Servicio de migración, conector de Fivetran, múltiples réplicas y más
Nos complace anunciar nuevas funciones en Zilliz Cloud, diseñadas para mejorar el soporte para ejecutar cargas de trabajo de IA en entornos de producción. Esta actualización equipa a desarrolladores y líderes técnicos con herramientas avanzadas para implementar y escalar de manera eficiente aplicaciones impulsadas por IA.
Las nuevas funciones permiten a los equipos técnicos:
Mantener la propiedad total de sus datos no estructurados mientras aprovechan tecnologías de primer nivel
Respaldar los requisitos de velocidad y escala de aplicaciones GenAI de producción a gran escala
Garantizar una operación robusta y segura de las cargas de trabajo de GenAI en entornos de producción
A medida que las organizaciones implementan cada vez más aplicaciones impulsadas por IA, gestionar grandes volúmenes de datos no estructurados, garantizar un alto rendimiento a escala y mantener la robustez operativa se convierten en desafíos críticos. Nuestras nuevas funciones abordan estos problemas, permitiendo que los equipos de desarrollo se centren en la innovación en lugar de la gestión de la infraestructura.
Aquí tienes una descripción general de nuestras nuevas funciones; sigue leyendo para obtener más detalles:
- Migration Service
- Conector de origen de Fivetran
- Multi-replica
- Auto-scaling
- Otras actualizaciones de preparación para producción
Únete a nosotros en nuestro webinario de lanzamiento para ver estas innovaciones en acción.
Una descripción general del lanzamiento de Zilliz de septiembre de 2024
Figura 1: Una descripción general del lanzamiento de Zilliz de septiembre de 2024
Migration Service: Migración de datos vectoriales segura y eficiente
Zilliz Cloud presenta Migration Services para datos vectoriales, una función recién lanzada que aborda desafíos críticos que enfrentan los desarrolladores al trabajar con bases de datos vectoriales en aplicaciones de IA. A medida que los proyectos evolucionan, la necesidad de transferir datos vectoriales entre bases de datos y otros sistemas de datos se vuelve crucial por varias razones:
Evitar la dependencia de un proveedor
Implementar estrategias robustas de copia de seguridad y recuperación de datos
Garantizar la interoperabilidad entre diferentes sistemas
Sin embargo, este proceso suele ser más complejo de lo previsto, con el riesgo de pérdida de información o funcionalidad durante la transferencia.
Migration Services simplifica estos desafíos al ofrecer lo siguiente:
Migración sin pérdidas entre bases de datos vectoriales (p. ej., Milvus, pgvector, Elastic)
Soporte tanto para importación masiva como para migración incremental de datos
Validación de datos integrada para garantizar la consistencia y preservar la funcionalidad
Operaciones de alto rendimiento diseñadas para manejar conjuntos de datos vectoriales a gran escala
Con Migration Services, los desarrolladores pueden mantener el control total sobre sus datos en diferentes plataformas y escenarios. Al simplificar el proceso de migración, Migration Services te permite centrarte en crear y mejorar tus modelos y aplicaciones de IA, al tiempo que garantiza la portabilidad, seguridad e integridad de los datos.
Fivetran Connector: Integración simplificada de datos no estructurados desde más de 500 fuentes
Zilliz Cloud ahora se integra con Fivetran, ampliando significativamente las capacidades de ingesta de datos. Este nuevo conector permite la recuperación eficiente de datos no estructurados desde más de 500 sistemas diferentes, ampliando el alcance de los datos accesibles para tus aplicaciones de IA.
Así es como funciona:
Los datos no estructurados de más de 500 fuentes (como Snowflake, MongoDB, Salesforce, etc.) fluyen hacia Fivetran.
Los conectores y la lógica de transformación de Fivetran procesan los datos.
El conector de origen de Milvus (creado con Fivetran SDK) canaliza los datos procesados hacia Zilliz/Milvus.
Los datos no estructurados se pueden vectorizar utilizando OpenAI Embedding Services a través del conector de Fivetran de OpenAI.
Finalmente, los datos vectoriales se ingieren en Zilliz Cloud/ Milvus, listos para la búsqueda vectorial y aplicaciones de IA.
Cómo funciona el conector de origen de Fivetran
Figura 2: Cómo funciona el conector de origen de Fivetran
Esta integración optimiza todo el proceso de recopilación, transformación y vectorización de datos no estructurados de diversas fuentes. Elimina la necesidad de canalizaciones ETL personalizadas, ahorrando tiempo y esfuerzo a los desarrolladores, al tiempo que garantiza un flujo de datos fluido hacia Milvus/ Zilliz.
Al aprovechar este conector de Fivetran, puedes crear fácilmente tus aplicaciones de IA con una amplia variedad de datos no estructurados, abriendo nuevas posibilidades para la búsqueda semántica y los insights impulsados por IA.
Multi-réplica: mejora del rendimiento y la disponibilidad
Recientemente disponible en vista previa pública, la funcionalidad multi-réplica refuerza las capacidades de Zilliz Cloud para entornos de producción. Esta característica permite la replicación a nivel de clúster, mejorando significativamente el rendimiento de las consultas y la disponibilidad del sistema.
Muchas aplicaciones de IA para consumidores enfrentan cuellos de botella de consultas por segundo (QPS) en producción debido a su alto volumen de usuarios. Multi-réplica aborda esto distribuyendo las cargas de trabajo de consultas entre réplicas, lo que permite el procesamiento paralelo que puede mejorar linealmente el QPS general a medida que se agregan réplicas. Esto da como resultado una menor latencia y una mayor eficiencia, esenciales para mantener la capacidad de respuesta en entornos de producción con alto tráfico.
Además, multi-réplica mejora la fiabilidad del sistema al distribuir réplicas entre múltiples Zonas de Disponibilidad (AZ). Esta arquitectura garantiza el acceso continuo a los datos incluso durante una interrupción de una AZ, proporcionando la alta disponibilidad necesaria para aplicaciones de misión crítica. Si bien multi-réplica no aumenta la capacidad general del clúster, ofrece una herramienta poderosa para optimizar el rendimiento de las consultas y garantizar la resiliencia del sistema requerida en entornos de producción, lo que permite a los equipos escalar sus aplicaciones de IA con confianza.
Escalado automático: gestión dinámica de la capacidad
Zilliz Cloud está lanzando una función de escalado automático (en vista previa privada) que aborda un desafío común en entornos de producción: gestionar la capacidad del clúster en respuesta a demandas fluctuantes. Esta función se ajusta dinámicamente cuando la capacidad del clúster se reduce en función del uso en tiempo real, lo que ayuda a prevenir restricciones de acceso de escritura debido a recursos insuficientes y a reducir las cargas operativas.
El escalado automático se activa cuando la capacidad de la Unidad de Cómputo (CU) del clúster supera un umbral especificado (70% predeterminado y ajustable) durante dos minutos consecutivos. Los desarrolladores pueden establecer un tamaño máximo de CU para el escalado, lo que proporciona control sobre la asignación de recursos y los costos.
Nota: El escalado automático se encuentra actualmente en vista previa privada y está disponible solo para clústeres Dedicated (Enterprise). Las organizaciones interesadas en probar esta función deben ponerse en contacto con el soporte de Zilliz para habilitar el acceso.
Otras actualizaciones de preparación para producción
Zilliz Cloud presenta algunas actualizaciones críticas adicionales para reforzar la preparación para producción:
Fiabilidad: SLA de tiempo de actividad del 99,95% para aplicaciones de IA de misión crítica.
Monitoreo y alertas:
39 alertas organizativas y de proyecto para la gestión de costos y rendimiento.
18 métricas clave sobre uso de recursos, QPS, resultados de solicitudes y operaciones de datos.
Gráficos personalizables para un análisis en profundidad del estado del sistema.
- Seguridad: SSO basado en Auth0 (Vista previa privada) con opciones de inicio de sesión de Google, Github, SSO y Email.
- Una nueva región de Zilliz Cloud en línea: Zilliz Cloud acaba de expandirse a una nueva región—AWS Tokyo (ap-northeast-1)! Esto significa menor latencia, mejor rendimiento y mayor soberanía de datos para nuestros usuarios en Asia-Pacífico y regiones vecinas.
Estas funciones proporcionan a los desarrolladores herramientas para mantener aplicaciones de IA de alto rendimiento, seguras y rentables en producción.
Potenciando aplicaciones de IA listas para producción con Zilliz Cloud
Las funciones más recientes de Zilliz Cloud están diseñadas para mejorar tu capacidad de crear y mantener aplicaciones de IA robustas en entornos de producción. Desde la migración segura de datos hasta el escalado dinámico y el monitoreo integral, estas actualizaciones abordan desafíos críticos que enfrentan los desarrolladores y los líderes técnicos.
¿Quieres saber más? Únete a nuestro próximo seminario web para descubrir cómo estas nuevas funciones pueden transformar la gestión de tus datos no estructurados y tus aplicaciones de IA. Nuestro equipo de producto hablará sobre los últimos avances y las mejores prácticas para aprovechar Zilliz Cloud en producción.
¿Listo para comenzar? Inicia tu recorrido con Zilliz Cloud gratis: sin instalación y sin necesidad de tarjeta de crédito. También puedes iniciar una prueba gratuita de 30 días de nuestra oferta dedicada, que incluye créditos por un valor de $100 al registrarte. ¡Recibirás un crédito adicional de $100 si te suscribes a Zilliz Cloud a través de cualquier marketplace en la nube!
Si tienes alguna pregunta o necesitas ayuda mientras exploras Zilliz Cloud, nuestro equipo de soporte está listo para ayudarte. Ponte en contacto a través de nuestro portal de soporte, y estaremos encantados de ayudarte a aprovechar estas nuevas funciones para tus aplicaciones de IA.
¡Comienza hoy a crear aplicaciones de IA listas para producción con Zilliz Cloud!
Sigue leyendo
Why Context Engineering Is Becoming the Full Stack of AI Agents
Discover how context engineering unifies prompts, RAG, and tools to build smarter, production-ready AI agents powered by Milvus.
Zilliz Cloud Delivers Better Performance and Lower Costs with Arm Neoverse-based AWS Graviton
Zilliz Cloud adopts Arm-based AWS Graviton3 CPUs to cut costs, speed up AI vector search, and power billion-scale RAG and semantic search workloads.
Demystifying the Milvus Sizing Tool
Explore how to use the Sizing Tool to select the optimal configuration for your Milvus deployment.