seosint

                             _____         _____ 
_____________ ______ ___________(_)_______ __  /_
__  ___/_  _ _  __ __  ___/__  / __  __ _  __/
_(__  ) /  __// /_/ /_(__  ) _  /  _  / / // /_  
/____/  ___/ ____/ /____/  /_/   /_/ /_/ __/  
                                                 
Search Engine Open Source Intelligence
created by @jcesarstef

seosint — Поисковая система с открытым исходным кодом

Многие внутренние URL-адреса веб-сайтов индексируются без ведома разработчика или SEO. И во время оценки веб-безопасности кажется нелепым тратить целый день, переходя от страницы к странице в поиске Google в поисках чего-то релевантного (то есть утечки).

Основываясь на предположении, что что-то повторяющееся должно быть автоматизировано, я работаю в seosint, инструменте с открытым исходным кодом, предназначенном для автоматизации поиска дыр в проектах поисковой оптимизации.

Функции частично рабочие:

• Поиск URL-адресов в Google
• Баннер
• Переключить домен Google при использовании reCaptcha (вручную)
• Изменение пользовательского агента (вручную)

TODO

• Сохранить в sqlite3

   [req]
  id|url|title|description|ads(i/o)|cache(i/o)|evidence_id
  
  [evidence]
  id|google_url|dump
  

• Удаление рекламы (или оповещение о ней)

Поисковые системы, которые нужно добавить

• Бинг
• Yahoo
• УткаУткаGo

Используйте пример

$ sh seosint.sh site:www.topseos.com
https://www.topseos.com/
https://www.topseos.com/downloads/
https://www.topseos.com/profile/boostability/
https://www.topseos.com/google/acquisitions/
https://www.topseos.com/sitemap/
https://www.topseos.com/disclosure/
https://www.topseos.com/registration/
https://www.topseos.com/conferences/
https://www.topseos.com/blog/
https://www.topseos.com/apply-for-rankings-research/
https://www.topseos.com/profile/ganpatizone/
https://www.topseos.com/profile/prbuzz/
https://www.topseos.com/profile/pagetraffic/
https://www.topseos.com/profile/webimax/
https://www.topseos.com/profile/seop/
https://www.topseos.com/profile/baligatra/
https://www.topseos.com/profile/zoek/
https://www.topseos.com/profile/arwebcom/
https://www.topseos.com/profile/staylisted/
http://www.topseos.com/profile/sentinia/
[...]
More than 600 lines in 0m5.072s