OSINT для ленивых. Часть 2: Что от нас скрывают админы сайтов — быстрый чек за 2 минуты
Админы интернет-ресурсов — публика скрытная, им бы все прятать и прятать, то адмику, спрячут, то пароли доступа.
Но мы же не за паролями пришли? На что они нам? Давайте посмотрим, что спрятано от поисковых систем и от нас, но так, чтобы по-быстрому.
Сразу же сделаем простой финт ушами: в адресной строке, сразу за именем сайта вобьем /robots.txt — то есть, если адересная строка будет выглядеть как https://example.com/robots.txtто мы сможем заглянуть "под капот" и узнать, что админы считают нужным скрыть от индексации поисковыми машинами и длинноносыми осинтерами...