Вторая, вытекает из первой, изменили свой алгоритм поисковые роботы – ленивее они стали. Заглянул на сайт такой робот – увидел, что нет для него записочки в виде robots и sitemap, пролистал пару тройку страниц и ушел восвояси, вернется, конечно, что бы еще пару страниц пролистать через месяц или два. И как вы думаете, сколько такой сайт к ТОПу идти будет? Поэтому пишем и robots и sitemap, первый самостоятельно ручками, а вот второй можно и с помощью онлайн сервисов, благо в сети их много.