Demokratisierung von Vektordatenbanken: Zugang und Gleichberechtigung stärken
Dieser Beitrag wurde ursprünglich in TheSequence veröffentlicht und wird hier mit Genehmigung erneut veröffentlicht.
Im 21. Jahrhundert dreht sich alles um die Demokratisierung von Technologie. Der Internetboom ermöglichte Zusammenarbeit in großem Maßstab, was dazu führte, dass Open Source zu einem typischen Muster der Softwareeinführung wurde. Da Tempo und Umfang technologischer Innovationen zunehmen, müssen wir daran arbeiten, sie zugänglicher zu machen.
Als Softwareentwickler bedeutet Demokratisierung von Technologie, sie so breit wie möglich verfügbar zu machen. Es bedeutet, das, was ich weiß, zu nutzen, um es anderen leichter zu machen, technologische Fortschritte zu schaffen, zu übernehmen und zu verstehen. Hier bei Zilliz ging es uns immer darum, die Einführung von Vektordatenbanken zu beschleunigen, nicht nur darum, die Nutzung des Open-Source-Projekts Milvus zu steigern.
In diesem Artikel werde ich Folgendes behandeln:
Was die Demokratisierung von Vektordatenbanken für Entwickler bedeutet
Säulen der Technologiedemokratisierung
Bildung zu Vektordatenbanken und verwandten Tools
Verbesserung der Zugänglichkeit von Vektordatenbanken
Technologie-Evangelismus
Eine Zusammenfassung der Demokratisierung von Vektordatenbanken
Was bedeutet die Demokratisierung von Vektordatenbanken für Entwickler?
Immer wenn ich „demokratisieren“ im Kontext von „XYZ-Technologie demokratisieren“ höre, denke ich daran, den Zugang zu dieser Technologie zu erweitern. Wenn es also um Vektordatenbanken geht, denke ich daran, den Zugang zu Vektordatenbanken zu erweitern. Traditionell waren Vektordatenbanken nur Softwareentwicklern in Unternehmen zugänglich.
Milvus begann den Prozess der Demokratisierung von Vektordatenbanken, als es zu einem Open-Source-Projekt der Linux Foundation wurde. Es war eine der ersten Vektordatenbanken, die Entwicklern als Open-Source-Projekt zur Verfügung standen. Mit dem Wachstum des Projekts konnten immer mehr Entwickler Vektordatenbanken nutzen, mehr darüber lernen und dazu beitragen.
Säulen der Technologiedemokratisierung
Die Demokratisierung von Technologie bringt spezifische Herausforderungen mit sich — insbesondere die Demokratisierung komplexer Tools wie Vektordatenbanken. Es gibt drei Säulen, die man betrachten sollte, wenn es um die Demokratisierung von Technologie geht. Sie sind Bildung, die Verbesserung der Zugänglichkeit und Evangelismus.
Bildung zu Vektordatenbanken und verwandten Tools
Bildung ist das wichtigste Thema, das viele Unternehmen oft falsch angehen. Bildung bedeutet, über Ihr spezifisches Produkt, die Technologie im Allgemeinen und verwandte Tools aufzuklären. Deshalb erstellen wir hier bei Zilliz Inhalte zu vielen Themen, nicht nur zu Milvus.
Die Inhalte, die wir schreiben, spiegeln unseren Wunsch wider, die Einführung von Vektordatenbanken durch Bildung zu beschleunigen. Daher haben wir Inhalte zu grundlegenden Konzepten wie Hierarchical Navigable Small Worlds (HNSW), Skalar- und Produktquantisierung und invertierten Dateiindizes.
Zusätzlich zur Bereitstellung von Ressourcen zum Verständnis der Konzepte hinter Vektordatenbanken müssen wir Ressourcen für verwandte Tools bereitstellen. Zum Beispiel hat die Beliebtheit großer Sprachmodelle (LLMs) eine Reihe neuer Tools hervorgebracht.
Einige neue Tools, die in den Vordergrund gerückt sind, sind LlamaIndex, Auto-GPT und LangChain. Darüber hinaus gehen im Einklang mit unserem Ziel, Bildungsressourcen für die Community bereitzustellen, viele unserer Inhalte an Dritte, wie The Sequence, The New Stack und einige Medium-Publikationen.
Verbesserung der Zugänglichkeit von Vektordatenbanken
Bildung über Technologie anzubieten ist zwar ausgezeichnet, aber nicht hilfreich, wenn man keine Möglichkeiten bietet, darauf zuzugreifen. In unserem Fall war die Open-Source-Veröffentlichung von Milvus der erste Schritt, um den Zugang zu Vektordatenbanken zu erweitern. Über den reinen Open-Source-Ansatz hinaus hat das Milvus-Projekt auch andere Wege verfolgt, um die Zugänglichkeit zu erhöhen.
Milvus ist auch über Docker-Images mit Vorlagen für Docker Compose und Helm verfügbar. Darüber hinaus haben wir es kürzlich über pip install als Milvus Lite verfügbar gemacht. Milvus hat über 3,5 Mio. Docker-Downloads, 18,8 Tsd. GitHub-Sterne und 212 Mitwirkende erreicht.
Neben Milvus hat auch Zilliz daran gearbeitet, die Zugänglichkeit zu erhöhen. Anfangs stellte Zilliz kostenlose Credits im Wert von 400 US-Dollar bereit und bietet nun eine kostenlose Stufe an, die bis zu eine halbe Million Vektoren ermöglicht! Das reicht für so gut wie jeden Entwickler. Mit der kostenlosen Stufe von Zilliz Cloud kann fast jeder Entwickler mit Vektordatenbanken loslegen — kostenlos.
Technologie-Evangelismus
Die letzte Säule, die bei der Demokratisierung von Technologie zu berücksichtigen ist, besteht darin, sie zu evangelisieren. Was nützt es, Technologie verfügbar zu machen und Bildung darüber anzubieten, wenn man den Menschen nicht sagt, warum sie nützlich ist? Im Hinblick auf die Beschleunigung der Einführung erklärt Bildung das Wie, und die Erhöhung der Zugänglichkeit deckt das Was ab — Evangelisierung liefert das Warum.
Wir betreiben Evangelismus hauptsächlich durch Inhalte, die die Leistungsfähigkeit von Vektordatenbanken zeigen. Das lässt sich an einigen der oben von mir bereitgestellten Lehrmaterialien erkennen. Außerdem halten wir Vorträge über Vektordatenbanken. Einige virtuelle und einige persönliche Vorträge. Kürzlich habe ich in Seattle einen Vortrag über den Einsatz von Vektordatenbanken als Lösung zur Behebung von Datenproblemen mit LLMs gehalten.
Zusammenfassung: Demokratisierung von Vektordatenbanken
Die Demokratisierung von Vektordatenbanken ist entscheidend, weil Vektordatenbanken viele Probleme bei unstrukturierten Daten lösen. Früher waren sie aufgrund der enormen Komplexität und des Umfangs eines solchen Projekts nur für Entwickler in großen Unternehmen verfügbar. Die Popularität von LLMs hat die Idee von Vektordatenbanken jedoch in den Mainstream gebracht und zahllose Anwendungsfälle entstehen lassen, die es zuvor nicht gab. Das macht Demokratisierung noch wichtiger.
Bei Zilliz haben wir die Demokratisierung mit drei Säulen angegangen — Bildung, Zugänglichkeit und Evangelismus. Bildung ist für uns der wichtigste Teil dieser Säulen. Für Entwickler bieten Lehrmaterialien das „Wie“ zur Nutzung von Vektordatenbanken und ergänzenden Tools.
Darüber hinaus haben wir stets daran gearbeitet, die Zugänglichkeit zu erhöhen, und tun dies weiterhin. Die Open-Source-Veröffentlichung der Software war der erste Schritt. Weitere Schritte zur Erhöhung der Zugänglichkeit umfassen die Bereitstellung von Vorlagen und Images für die Containerisierung. Kürzlich haben wir Milvus Lite veröffentlicht, eine Vektordatenbank, die direkt in Ihrem Jupyter Notebook laufen kann.
Schließlich betreiben wir technischen Evangelismus, um die Nutzung und Leistungsfähigkeit von Vektordatenbanken bekannter zu machen. Wir tun dies, indem wir Webinare anbieten, auf Community-Veranstaltungen sprechen und in sozialen Medien präsent sind.
Zilliz setzt seine Bemühungen fort, Vektordatenbanken zu demokratisieren, und das ist spannend, weil sie so wichtig sind. Vektordatenbanken sind entscheidend für die Lösung von Datenproblemen in LLMs und die beste bestehende Lösung für Dinge wie umgekehrte Bildsuche, semantische Textsuche und Produktempfehlungen. Ich persönlich freue mich, Teil eines Teams zu sein, das dazu beiträgt, den Bereich der Vektordatenbanken wachsen zu lassen, und freue mich auf all die großartigen Dinge, die für die Community und von der Community entwickelt werden!
Weiterlesen
How Zilliz Ended Up at the Center of NVIDIA’s Unstructured Data Story at GTC 2026
If unstructured data is the context of AI, then the ceiling of AI applications will be set not just by models, but by how mature the infrastructure for unstructured data becomes.
Zilliz Cloud Launches in AWS Australia, Expanding Global Reach to Australia and Neighboring Markets
We're thrilled to announce that Zilliz Cloud is now available in the AWS Sydney, Australia region (ap-southeast-2).
Our Journey to 35K+ GitHub Stars: The Real Story of Building Milvus from Scratch
Join us in celebrating Milvus, the vector database that hit 35.5K stars on GitHub. Discover our story and how we’re making AI solutions easier for developers.