Хабр Курсы для всех
РЕКЛАМА
Практикум, Хекслет, SkyPro, авторские курсы — собрали всех и попросили скидки. Осталось выбрать!
Ни чего не имею против всякого рода новомодных приблуд
Вот только чтобы подобрать «частоту изменения»
Далее: может ли робот проиндексировать страницу, на которую нет ни одной ссылки. Ни статической, ни динамической. Поисковики, конечно, умные, но не настолько…
Представьте, что у вас часть сайта на отдельном поддомене.
Ну и напоследок: если сами поисковики просят создавать sitemap — считаете, они глупые?
Вообще — да: github.com/vasiatka/sitemap/blob/master/sitemap/src/SitemapBuilder.class.php#L56. Это стандарт.
С чего вы решили, что на страницу нельзя попасть?))) Я говорил только про отсутствие ссылок.
Ой-ли… С чего вдруг он стал странным? С того, что тематическую часть вынесли в отдельный поддомен? И да, sitemap с этим поможет.
Т.е., m.habrahabr.ru — это отдельный сайт?
Ну а news.yandex.ru конечно-же не имеет никакого отношения к yandex.ru).
Более простой пример — news.nnm.me — на поддоменах отдельные разделы, но никак не отдельные сайты.
Note: A Sitemap index file can only specify Sitemaps that are found on the same site as the Sitemap index file. For example, www.yoursite.com/sitemap_index.xml can include Sitemaps on www.yoursite.com but not on www.example.com or yourhost.yoursite.com. As with Sitemaps, your Sitemap index file must be UTF-8 encoded.
И сейчас такие проблемы есть — я их написал, но вы упорно пытаетесь их игнорировать). Второй момент — автору сайта не надо писать парсер, он может очень точно указать ссылки на страницы для индексации. При чем тут вообще парсер?)))
Sitemap.xml или «Делать было нечего...»