sitemap и robots.txt - совместное использование

Здравствуйте, не подскажите существует ли пагин для генерации sitemap.xml с учетом записей в robots.txt. Ведь не совсем комильфо, когда фаил sitemap.xml содержит урлы, запрещенные к индексации.

Макс Сапронов

08 мая 2013, 08:48

1 092

Комментарии: 3

Clean

08 мая 2013, 13:47

Какая-то ерунда.Robots ты генерируешь ручками, в чем проблема поправить xml?
+если ты генеришь xml через getResourece и ему подобный сниппет ты явно можешь указать в параметре какие ресурсы не надо индексировать… И они просто не появятся в схеме

Мордынский Николай

08 мая 2013, 16:43

sitemapFriend в помощь

Макс Сапронов

13 мая 2013, 09:31

Это все известно, имелось ввиду что бы на автомате убирались закрытые в robots.txt url, чтобы не ковырять отдельно 2 файла, а сделать в 1, так сказать экономия времени ;)
PS. ну да ладно будет делать ручками и дальше…

Авторизуйтесь или зарегистрируйтесь, чтобы оставлять комментарии.