go sonic

Vaya al cliente para el backend de búsqueda sónica

Este paquete implementa todos los comandos para trabajar con Sonic. Si falta uno, ¡abra un problema! :)

Sonic: https://github.com/valeriansaliou/sonic

Instalar

go get github.com/expectedsh/go-sonic

Ejemplo

 package main

import (
	"fmt"
	"github.com/expectedsh/go-sonic/sonic"
)

func main () {

	ingester , err := sonic . NewIngester ( "localhost" , 1491 , "SecretPassword" )
	if err != nil {
		panic ( err )
	}

	// I will ignore all errors for demonstration purposes

	_ = ingester . BulkPush ( "movies" , "general" , 3 , []sonic. IngestBulkRecord {
		{ "id:6ab56b4kk3" , "Star wars" },
		{ "id:5hg67f8dg5" , "Spider man" },
		{ "id:1m2n3b4vf6" , "Batman" },
		{ "id:68d96h5h9d0" , "This is another movie" },
	})

	search , err := sonic . NewSearch ( "localhost" , 1491 , "SecretPassword" )
	if err != nil {
		panic ( err )
	}

	results , _ := search . Query ( "movies" , "general" , "man" , 10 , 0 )

	fmt . Println ( results )
}

Granel de referencia

Método BulkPush y BulkPop utilizan un grupo de conexiones personalizado con un algoritmo de distribución de rutinas. Este es el punto de referencia (archivo sonic/ingester_test.go):

 goos: linux
goarch: amd64
pkg: github.com/expectedsh/go-sonic/sonic
BenchmarkIngesterChannel_BulkPushMaxCPUs-8   	       2	 662657959 ns/op
BenchmarkIngesterChannel_BulkPush10-8        	       2	 603779977 ns/op
BenchmarkIngesterChannel_Push-8              	       1	1023322864 ns/op
PASS

La inserción masiva es más rápida que el bucle for en Push. Detalle del hardware: CPU Intel(R) Core(TM) i7-8550U a 1,80 GHz

Seguridad del hilo

El controlador en sí no es seguro para subprocesos. Podrías utilizar cerraduras o canales para evitar accidentes.

 package main

import (
	"fmt"

	"github.com/expectedsh/go-sonic/sonic"
)

func main () {
	events := make ( chan [] string , 1 )

	event := [] string { "some_text" , "some_id" }
	tryCrash := func () {
		for {
			// replace "event" with whatever is giving you events: pubsub, amqp messages…
			events <- event
		}
	}

	go tryCrash ()
	go tryCrash ()
	go tryCrash ()
	go tryCrash ()

	ingester , _ := sonic . NewIngester ( "localhost" , 1491 , "SecretPassword" )

	for {
		msg := <- events
		// Or use some buffering along with BulkPush
		ingester . Push ( "collection" , "bucket" , msg [ 1 ], msg [ 0 ])
	}
}