Система автоматического сбора данных AMR (ранее — Universal Thief Program) — это веб-приложение, которое полностью автоматически собирает данные с веб-сайтов. В настоящее время оно поддерживает более 95 % коллекций веб-сайтов.
По сравнению с другими воровскими программами или инструментами для сбора средств, представленными на рынке, эта программа имеет следующие характеристики:
1. Простота установки и использования: просто введите информацию об URL-адресе целевого сайта, который вы хотите собрать, и содержимое целевого сайта будет автоматически собрано, настроив правила замены и изменив CSS, вы можете настроить макет и содержимое веб-сайта; ;
2. Поддержка генерации статики и обновление статики по требованию: будут собираться и генерироваться только статические страницы, посещенные пользователями (включая поисковые системы), что не вызовет большой нагрузки на целевой сайт, даже если целевой сайт не работает; этот сайт по-прежнему будет работать нормально;
3. Автоматически обновлять статические данные по требованию: установите время статического обновления в фоновом режиме, и статические данные будут автоматически обновляться в соответствии со статусом доступа посетителя, сохраняя их соответствие содержимому целевого сайта;
4. Поддерживает сбор нескольких имен поддоменов: если целевой сайт использует несколько доменных имен второго уровня, этот сайт также может автоматически собирать содержимое сайта всех доменных имен второго уровня для формирования сайта;
5. Дополнительный сбор изображений: если сбор изображений включен, все изображения целевого сайта могут быть автоматически собраны на сервере этого сайта, что полезно для поисковой оптимизации (эта функция может занимать много места на жестком диске и рекомендуется пользователям с независимыми серверами или VPS);
6. Прорвите функцию защиты от хотлинков изображений: включите функцию сбора изображений, и даже если у другой стороны есть функция защиты от хотлинков изображений, вы можете легко прорваться;
7. Поддерживает сбор изображений с разных доменных имен: например, крупные сайты, такие как Taobao и Sina, используют разные доменные имена для изображений и веб-сайтов; эта программа также может собирать все изображения, а также пробивать горячие ссылки;
8. Содержимое/реклама веб-страницы может быть изменена по желанию: с помощью правил замены, правил удаления и правил узлов вы можете заменить заголовок веб-сайта, рекламные объявления и указанный контент нужным вам контентом (замена HTML-кода, который вы можете удалить); ненужный контент;
9. Поддержка замены и удаления регулярных выражений; поддержка замены, удаления, добавления или изменения синтаксиса Xpath;
10. Поддерживает настраиваемый вызов RSS-каналов: программа имеет встроенные правила вызова Baidu Top Ranking, которые позволяют легко отображать Baidu Top Rankings в любом месте веб-страницы и формировать агрегированный поиск внутри сайта;
11. Поддержка совокупного поиска на сайте. Совокупный поиск на сайте может выполнять поиск контента на сайте. Если контент не существует на сайте, вы можете настроить источник поисковых данных для непосредственного сбора данных с других веб-сайтов и поддержки китайского языка. сегментация слов!
12. Вы можете легко создавать агрегированные поисковые системы, веб-сайты сравнения цен и веб-сайты поиска покупок: с помощью функции агрегированного поиска на сайте вы можете настроить N источников поисковых данных, а настроив шаблоны отображения вы можете создать агрегированные поисковые системы, цены сайты сравнения и сайты поиска покупок;
13. Вы можете использовать эту программу, чтобы помочь корпоративному веб-сайту создавать статические страницы и повысить безопасность корпоративного веб-сайта: для общих динамических веб-сайтов вы можете подключить эту программу для автоматического создания статических страниц, и статические страницы могут регулярно обновляться в соответствии с в настройки;
14. Поддержка сбора прокси-серверов, чтобы избежать блокировки IP-адресов целевыми сайтами;
15. Правила извлечения и функция сбора нескольких сайтов: с помощью этой функции несколько целевых сайтов можно легко интегрировать в один веб-сайт! Целью правил извлечения является извлечение содержимого веб-сайта N-й стороны и размещение его на своем веб-сайте, чтобы его можно было легко связать с вашим текущим веб-сайтом. Вы можете использовать свой предыдущий веб-сайт для самостоятельной публикации контента и использовать AMR. система сбора всего содержимого веб-сайта для автоматического обновления содержимого, поскольку содержимое веб-страницы состоит из содержимого нескольких веб-сайтов и эквивалентно исходному содержимому;
Это мощный инструмент оригинальности статей;
16. Вы можете установить нестатический адрес: эта функция предназначена в основном для страницы поиска. Если страница поиска сделана статической и выполняется поиск по разным ключевым словам, отображаемые результаты будут одинаковыми, поэтому страницу поиска необходимо добавить в список. нестатический список.
17. Мощная функция управления рекламой: встроенные правила извлечения рекламы в настоящее время могут соответствовать часто используемым рекламным кодам. Пользователям нужно только заменить рекламные коды соответствующих размеров.
18. Страница с ошибкой автоматически выполняет перенаправление 301: если вы измените целевой сайт, адрес, включенный в исходную поисковую систему, сообщит об ошибке, которая теперь может легко привести к сайту K, если вы зайдете на несуществующую страницу; будет предложена дружественная страница с ошибкой. И через 5 секунд она автоматически перейдет на домашнюю страницу веб-сайта (вес также будет перенесен на домашнюю страницу), сообщая поисковой системе, что исходная страница больше не существует, что позволяет ее удалить. включенный индекс, снижающий риск оказаться K!
Инструкции по установке
Требования к системе автоматического сбора данных AMR V4.1: ваш сервер должен поддерживать asp.net2.0 и использовать версию базы данных MSSQL2005 или более позднюю.
Прикрепил windows.netframework2.0.
Адрес загрузки 32-битной версии: http://uwz.cc/10P
Адрес загрузки 64-битной версии: http://uwz.cc/10Q
Чтобы узнать конкретные этапы установки, присоединяйтесь к форуму для получения справочных инструкций: http://www.amr-lab.net/showtopic-222.html.
Инструкции по обновлению
Сначала создайте резервную копию базы данных и файла web.config, а затем выполните следующие действия:
Разархивируйте пакет программы, за исключением web.config, install.aspx, Setup2000.sql и Setup2005.sql, загрузите все остальные файлы в корневой каталог веб-сайта. Запустите URL-адрес/обновление и следуйте инструкциям, чтобы импортировать обновление. сценарий!
Измените файл web.config и удалите или закомментируйте эту строку.
Примечание. Если вы изменили шаблон на своем сайте, создайте его резервную копию самостоятельно.
Список обновлений программы
Функции, добавленные в версии V4.1:
Добавлена новая функция автоматического перевода, чтобы сделать собранный контент по-настоящему оригинальным!
Добавлен код внедрения системной переменной для облегчения настройки шаблона;
Оптимизированные предметы:
Функция перехвата внешних ссылок: добавлена функция перехвата внешних ссылок, которая позволяет легко превращать внешние ссылки во внутренние и размещать рекламу. Используйте ее с [прокси-системой AMRweb: http://uwz.cc/11H] для достижения наилучшего эффекта! Друзья, которые понимают, могут обратиться к файлу go.aspx и изменить его самостоятельно!
Добавьте сопоставление URL-адресов в правила узла по умолчанию;
Исправлены ошибки:
Агрегированный поиск по словам, связанный с поиском, для удаления избыточного HTML-кода;
У изображения нет mimetype. Проблема с оценкой того, что ссылка не принадлежит этому сайту. Проблема с неправильным изменением фонового пароля. Проблема сбоя автоматического обновления при неполном HTML.
4. Заявление об авторских правах
Система сбора данных AMR разработана лабораторией автоматического сбора данных AMR amr-lab.net и обладает независимыми правами интеллектуальной собственности.
При использовании системы автоматического сбора данных AMR вы по умолчанию принимаете «Лицензионное соглашение системы автоматического сбора данных AMR». См. http://www.amr-lab.net/showtopic-220.html Лицензионное соглашение.
5. Различия версий
Система сбора AMR имеет восемь версий: бесплатная, пробная, базовая авторизованная, пожизненная авторизованная, базовая, стандартная, расширенная и высшая. Бесплатная версия бесплатна для использования. Коммерческая версия имеет больше функций и послепродажное обслуживание. Друзья могут выбирать в соответствии со своими потребностями.
Чтобы просмотреть функции, стоимость и различия в обслуживании каждой версии, посетите http://www.amr-lab.net/showtopic-223.html список функций и расценки бесплатной и платной версий.
6. Свяжитесь с нами
Группы QQ: 124867090, 147976428, 4624706 (по вопросам приобретения программного обеспечения, консультаций по использованию, индивидуальной разработки и т. д. обращайтесь к владельцу группы)
Официальный сайт: http://www.amr-lab.net.
Официальный Weibo: http://weibo.com/AmrLab
7. Области применения
1. Сайт клиента Taobao. Собрав существующие сайты клиентов Taobao или определенный подсайт Taobao, вы можете быстро создать свой собственный сайт клиента Taobao. Вам нужно всего лишь перейти по ссылке клиента Taobao на странице покупки; После этого контент будет автоматически обновляться каждый день, а вебмастер будет просто сидеть сложа руки и ждать, пока заберет деньги!
2. Сайт агрегированного поиска. Вы можете создать персонализированную поисковую систему, настроив многоканальные источники поисковых данных, а также встроить данные рейтинга Baidu на определенные страницы для обновления содержимого веб-сайта в режиме реального времени!
3. Обновление контента корпоративного веб-сайта. Самой большой головной болью для веб-сайта компании является обновление контента. Как правило, они предпочитают нанимать сотрудника для добавления статей, что требует больших затрат на оплату труда каждый год, и к системе сбора данных AMR можно легко подключиться. существующий сайт предприятия. Вы можете использовать эту систему для сбора последних тенденций в отрасли! Поскольку контент обновляется в режиме реального времени, рейтинг Baidu будет быстро расти!
4. Сеть сравнения цен. Вы можете легко создать сеть сравнения цен, настроив поисковые интерфейсы нескольких торговых центров; все, что вам нужно сделать, это разработать шаблон и объединить полученные данные; не забудьте подать заявку на получение идентификатора альянса; Ожидание получения комиссии с продаж!
5. Сайты фильмов, картинок красоты, флэш-игр... пока это не сайты, требующие от пользователей входа в систему и регистрации, нашу систему можно легко построить, не правда ли, здорово?