horapy

horapy

[Página inicial] [Documento] [Exemplos] [Hora]

Ligação Python para a Hora Approximate Nearest Neighbor Search

Principais recursos

• Desempenho ⚡️

  • Acelerado por SIMD (packed_simd)
  • Implementação de algoritmo estável
  • Design de vários threads

• Suporte a vários índices

  • Hierarchical Navigable Small World Graph Index(HNSWIndex) (detalhe)
  • Satellite System Graph (SSGIndex) (detalhe)
  • Product Quantization Inverted File(PQIVFIndex) (detalhe)
  • Random Projection Tree(RPTIndex) (LSH, WIP)
  • BruteForce (BruteForceIndex) (implementação ingênua com SIMD)

• Portátil

  • Suporte no_std (WIP, parcial)
  • Suporta Windows , Linux e OS X
  • Suporte IOS e Android (WIP)
  • Nenhuma dependência pesada, como BLAS

• Confiabilidade

  • O compilador Rust protege todo o código
  • Memória gerenciada por Rust
  • Ampla cobertura de testes

• Suporte para múltiplas distâncias ?

  • Dot Product Distance
  • Euclidean Distance
  • Manhattan Distance
  • Cosine Similarity

• Produtivo

  • Bem documentado
  • API elegante e simples, fácil de aprender

Referência

por aws t2.medium (CPU: Intel(R) Xeon(R) CPU E5-2686 v4 @ 2.30GHz) mais informações

Instalação

pip install horapy

Exemplo

 import numpy as np
from horapy import HNSWIndex

dimension = 50
n = 1000

# init index instance
index = HNSWIndex ( dimension , "usize" )

samples = np . float32 ( np . random . rand ( n , dimension ))
for i in range ( 0 , len ( samples )):
    # add node
    index . add ( np . float32 ( samples [ i ]), i )

index . build ( "euclidean" )  # build index

target = np . random . randint ( 0 , n )
# 410 in Hora ANNIndex <HNSWIndexUsize> (dimension: 50, dtype: usize, max_item: 1000000, n_neigh: 32, n_neigh0: 64, ef_build: 20, ef_search: 500, has_deletion: False)
# has neighbors: [410, 736, 65, 36, 631, 83, 111, 254, 990, 161]
print ( "{} in {} n has neighbors: {}" . format (
    target , index , index . search ( samples [ target ], 10 )))  # search

Licença

Todo o repositório está sob licença Apache.