Установить .NET
Загрузите этот проект.
Бегать
cd FTServer
dotnet run -c Release
Открыть http://127.0.0.1:5066/
Нажмите [Ctrl+C] для выключения.
Введите полный URL-адрес, чтобы проиндексировать страницу, а затем выполните поиск.
Переместить страницу вперед, переиндексировав страницу.
[Слово1 Слово2 Слово3] => в тексте есть Слово1 , Слово2 и Слово3
["Слово1 Слово2 Слово3"] => текст целиком содержит "Слово1 Слово2 Слово3"
Искать [https] или [http] => получить почти все страницы
Скачать код Visual Studio
iBoxDB
Угол Шарп
Семантический интерфейс
Порядок результатов основан на номере id() в классе PageText в порядке убывания.
Страница имеет множество PageTexts. если не требуется несколько текстов, измените Html.getDefaultTexts(Page) , возвращает только один PageText (только текст описания страницы, Config.DescriptionOnly=true ).
метод Page.GetRandomContent() используется для постоянного изменения содержимого страницы поиска и не влияет на реальный порядок PageText.
Используйте идентификационный номер для управления порядком вместо загрузки всех страниц в память.
поиск (... строковые ключевые слова, длинный startId , длинный счетчик )
startId => какой идентификатор (идентификатор при создании PageText) начинать, используйте (startId=Long.MaxValue) для чтения сверху, в порядке убывания
count => записи для чтения, важный параметр , скорость поиска зависит от этого параметра, а не от размера данных.
установите startId как последний идентификатор из результатов поиска минус один
startId = search ( " keywords " , startId , count ) ;
nextpage_startId = startId - 1 // this 'minus one' has done inside search()
.. .
//read next page
search ( " keywords " , nextpage_startId , count )
в основном, nextpage_startId публикуется из клиентского браузера, когда пользователь достигает конца веб-страницы и устанавливает значение по умолчанию nextpage_startId=Long.MaxValue, в javascript большое число нужно записать как строку ("'" + nextpage_startId + "'")
Открыть
public Page Html . Get ( String url ) ;
Установите текст вашего личного веб-сайта
Page page = new Page ( ) ;
page . url = url ;
page . title = title ;
page . text = bodyText
page.. . = .. .
return page ;
Настройка индексного кэша только для чтения (Readonly_MaxDBCount) из FTServer/Code/Config.cs .
[user@localhost ~ ]$ cat /proc/sys/fs/file-max
803882
[user@localhost ~ ]$ ulimit -a | grep files
open files (-n) 500000
[user@localhost ~ ]$ ulimit -Hn
500000
[user@localhost ~ ]$ ulimit -Sn
500000
[user@localhost ~ ]$
$ vi /etc/security/limits.conf
* hard nofile 500000
* soft nofile 500000
root hard nofile 500000
root soft nofile 500000
[user@localhost ~ ]$ firewall-cmd --add-port=5066/tcp --permanent
Почему Трекер потребляет ресурсы моего компьютера?
[user@localhost ~ ]$ tracker daemon -k
[user@localhost project]$ tracker reset --hard
Пересадка из версии Java JSP полнотекстового поиска