Ответ Яндекса на сообщение МегаФона по поводу "технического сбоя" на сайте оператора

Обращаем особое внимание на то, что URL-ы страниц раздела отправки SMS с сайта www.sendsms.megafon.ru были доступны также в других поисковиках.

Яндекс индексирует только открытую часть интернета — те страницы, которые доступны при переходе по ссылкам без ввода логина и пароля. Страницы, индексация которых запрещена администратором сайта в файле robots.txt, Яндекс не индексирует, даже если они находятся в открытой части интернета. Это соответствует всем общепринятым нормам и правилам взаимодействия в интернете.

Стандарт, регламентирующий работу поисковых систем в интернете, включающий в себя описание файла robots.txt, был принят еще в 1994 году. Исходя из этих правил работают все поисковые системы, они также хорошо известны администраторам большинства интернет-ресурсов. Вся информация, не запрещенная к индексации администратором сайта в файле robots.txt, доступна роботам поисковых систем. Никакой поисковый робот не может оценить соответствие содержания страниц законодательным нормам. И ответственность за размещение информации в открытом доступе лежит на том, кто её разместил или не защитил должным образом.

Особо хотим отметить, что никакие сервисы Яндекса не виноваты в утечке данных с сайта МегаФона. Ни Яндекс.Бар, ни Яндекс.Метрика не скачивают содержимое веб-страниц. Если страница закрыта для индексации в файле robots.txt или защищена логином и паролем, то она недоступна и поисковым роботам, то есть информация, размещенная на ней, никогда не окажется в какой-либо поисковой системе.

За сегодняшний день специалисты МегаФона не обращались в Яндекс за дополнительной информацией. Мы открыты к сотрудничеству и готовы присоединиться к внутреннему расследованию МегаФона по факту «технического сбоя» на сайте оператора.

Рекомендуем администраторам сайта МегаФона и веб-мастерам других сайтов изучить информацию о файле robots.txt http://help.yandex.ru/webmaster/?id=996567 и его корректном использовании.