ftserver cs

Serveur de moteur de recherche en texte intégral pour CSharp

Guide de l'utilisateur

Installation

1. Installer .NET

2. Téléchargez ce projet.

3. Courir

 cd FTServer
dotnet run -c Release

4. Ouvrez http://127.0.0.1:5066/

5. Appuyez sur [Ctrl+C] pour arrêter.

Saisissez une URL complète pour indexer la page, puis effectuez une recherche.

Avancez la page en réindexant la page.

Format de recherche

[Mot1 Mot2 Mot3] => le texte contient Mot1 , Mot2 et Mot3

["Mot1 Mot2 Mot3"] => le texte contient "Mot1 Mot2 Mot3" dans son ensemble

Rechercher [https] ou [http] => obtenir presque toutes les pages

Guide du développeur

Télécharger le code Visual Studio

Dépendances

iBoxDB

AngleSharp

Interface utilisateur sémantique

L'ordre des résultats

L'ordre des résultats basé sur le numéro id() dans la classe PageText , par ordre décroissant.

Une page contient de nombreux PageTexts. si vous n'avez pas besoin de plusieurs textes, modifiez Html.getDefaultTexts(Page) , renvoie un seul PageText (le texte de description de la page uniquement, Config.DescriptionOnly=true ).

la méthode Page.GetRandomContent() est utilisée pour que le Search-Page-Content change toujours, n'affecte pas l'ordre réel du PageText.

Utilisez le numéro d'identification pour contrôler la commande au lieu de charger toutes les pages en mémoire.

Méthode de recherche

recherche (... Mots-clés de chaîne, long startId , long count )

startId => quel ID (l'identifiant lorsque vous avez créé PageText) pour démarrer, utilisez (startId=Long.MaxValue) pour lire à partir du haut, par ordre décroissant

count => enregistrements à lire, paramètre important , la vitesse de recherche dépend de ce paramètre, pas de la taille des données.

Page suivante

définir le startId comme dernier identifiant à partir des résultats de la recherche moins un

 startId = search ( " keywords " , startId , count ) ;
nextpage_startId = startId - 1 // this 'minus one' has done inside search()
.. .
//read next page
search ( " keywords " , nextpage_startId , count )

la plupart du temps, le nextpage_startId est publié à partir du navigateur client lorsque l'utilisateur atteint la fin de la page Web et définit la valeur par défaut nextpage_startId=Long.MaxValue, en javascript, le grand nombre doit être écrit sous forme de chaîne ("'" + nextpage_startId + "'")

Serveur privé

Ouvrir

 public Page Html . Get ( String url ) ;

Définissez le texte de votre site Web privé

 Page page = new Page ( ) ;
page . url = url ;
page . title = title ;
page . text = bodyText
page.. . = .. .
return page ; 

Configurer le cache

Définition du cache en lecture seule d'index (Readonly_MaxDBCount) à partir de FTServer/Code/Config.cs .

Définir le nombre maximum de fichiers ouverts

[user@localhost ~ ]$ cat /proc/sys/fs/file-max
803882
[user@localhost ~ ]$ ulimit -a | grep files
open files                      (-n) 500000
[user@localhost ~ ]$  ulimit -Hn
500000
[user@localhost ~ ]$ ulimit -Sn
500000
[user@localhost ~ ]$ 


$ vi /etc/security/limits.conf
*         hard    nofile      500000
*         soft    nofile      500000
root      hard    nofile      500000
root      soft    nofile      500000


[user@localhost ~ ]$ firewall-cmd --add-port=5066/tcp --permanent

Démon Stop Tracker

Pourquoi Tracker consomme-t-il des ressources sur mon PC ?

[user@localhost ~ ]$ tracker daemon -k

[user@localhost project]$ tracker reset --hard

Plus

Transplantation à partir de la recherche en texte intégral version Java JSP