Milvus

Milvus이란 무엇인가요?

Milvus는 텍스트, 이미지, 멀티모달 등 대규모 비정형 데이터를 처리하기 위해 설계된 클라우드 네이티브 벡터 데이터베이스입니다. 컴퓨트와 스토리지가 분리된 분산 아키텍처로 수평 확장성과 고가용성을 제공합니다. Milvus는 다양한 벡터 인덱스 방법, 하드웨어 가속, 그리고 근사 최근접 이웃(ANN), 메타데이터 필터링, 하이브리드 밀집-희소 벡터 검색 등 고급 검색 기능을 지원합니다. 시맨틱 검색, 추천 시스템, Retrieval-Augmented Generation(RAG) 등 AI 응용 분야에서 널리 활용되며, 인증, 암호화, 세밀한 접근 제어를 통한 강력한 데이터 보안 기능도 제공합니다.

주요 기능

• 분산 및 확장 가능한 아키텍처

  스토리지와 컴퓨트가 분리된 모듈형 마이크로서비스 구조로, 쿼리 및 데이터 노드를 독립적으로 확장하여 대규모 워크로드를 효율적으로 처리할 수 있습니다.

• 다양한 인덱싱 지원

  HNSW, IVF, FLAT, SCANN 등 10가지 이상의 벡터 인덱스 타입과 GPU 가속 인덱스를 지원하여 요구에 맞는 성능과 정확성을 제공합니다.

• 다양한 검색 기능

  Top-K ANN, 범위 검색, 메타데이터 필터링, 그리고 하이브리드 밀집 및 희소 벡터 검색 등 유연하고 정밀한 검색 기능을 제공합니다.

• 하드웨어 가속

  CPU SIMD 명령어와 GPU 인덱싱을 활용하여 벡터 검색 속도와 비용 효율성을 극대화합니다.

• 멀티 테넌시 및 핫/콜드 스토리지

  멀티 테넌트 환경에서 다양한 수준의 격리를 지원하며, 자주 접근되는 핫 데이터와 덜 사용되는 콜드 데이터를 분리하여 비용을 최적화합니다.

• 데이터 보안 및 접근 제어

  필수 사용자 인증, TLS 암호화, RBAC(역할 기반 접근 제어)를 통해 민감한 데이터를 보호합니다.

사용 사례

• 시맨틱 검색 : 문서 검색, 이미지 인식 등 대규모 텍스트, 이미지, 멀티모달 데이터셋에서 효율적으로 유사도 검색을 수행할 수 있습니다.
• 추천 시스템 : 사용자 행동 및 제품 특성을 분석하여 전자상거래 및 콘텐츠 플랫폼에서 개인화된 추천을 제공합니다.
• Retrieval-Augmented Generation (RAG) : 대규모 비정형 데이터에서 관련 정보를 추출하여 AI Q&A 및 챗봇 시스템을 강화합니다.
• 이상 탐지(사기 탐지) : 벡터화된 데이터를 기존의 사기 패턴과 비교하여 거래 내의 이상 징후를 탐지합니다.
• 비전 및 객체 인식 : 제조 및 품질 관리에서 결함 탐지와 이미지 기반 객체 검색을 지원합니다.
• 실시간 검색 및 매칭 : 채용, 아바타 커스터마이징, 동영상 콘텐츠 추천 등에서 확장 가능한 벡터 검색을 통해 실시간 매칭을 지원합니다.

자주 묻는 질문