라이온

라이온 / CLIP-ViT-B-32-laion2B-s34B-b79K

제로샷 이미지 분류, 이미지-텍스트 검색, 이미지 분할에 사용할 수 있는 멀티모달 임베딩 모델입니다.

CLIP-ViT-B-32-laion2B-s34B-b79K 개요

CLIP-ViT-B-32-laion2B-s34B-b79K**는 LAION에서 개발한 멀티모달 임베딩 모델입니다. 이 모델은 Laion-5B 데이터 세트의 영어 하위 집합을 사용하여 텍스트와 이미지 간의 관계를 이해하도록 학습되었습니다. 별도의 학습 없이 텍스트 설명을 기반으로 이미지를 분류할 수 있는 제로샷 이미지 분류, 유사한 이미지나 텍스트를 찾는 이미지-텍스트 검색, 의미적 의미에 따라 이미지 내 객체를 식별하고 분할하는 이미지 분할 등 다양한 컴퓨터 비전 및 검색 작업에 활용할 수 있습니다.

CLIP-ViT-B-32-laion2B-s34B-b79K를 사용하여 임베딩 생성하는 방법

OpenCLIP을 통해 임베딩에 CLIP-ViT-B-32-laion2B-s34B-b79K를 사용할 수 있습니다.

벡터 임베딩이 생성되면 밀버스에서 제공하는 완전 관리형 벡터 데이터베이스인 질리즈 클라우드와 같은 벡터 데이터베이스에 저장하여 이미지 검색 또는 멀티모달 검색에 사용할 수 있습니다.

다음은 네 가지 주요 단계입니다:

  • 질리즈 클라우드 계정에 무료로 가입합니다.
  • 서버리스 클러스터를 설정](https://docs.zilliz.com/docs/create-cluster#set-up-a-free-cluster)하고 퍼블릭 엔드포인트 및 API 키를 발급받습니다.
  • 벡터 컬렉션을 생성하고 벡터 임베딩을 삽입합니다.
  • 저장된 임베딩에 대해 시맨틱 검색을 실행합니다.

오픈클립을 통해 임베딩을 생성하고 질리츠 클라우드에 삽입하여 멀티모달 검색하기

단계별 가이드: 곧 제공 예정.

더 읽어보기