Если во время посещения ботом страницы хостинг решил "отдохнуть", то бот получил какой-нибудь ответ с ошибкой от сервера и выкинул страницу из индекса. В сделующий раз вернёт. Для проверки этого и сделали панель вебмастера яндекса, где показываются полученные ошибки от сервера