Ага, если у тебя есть last modified) Если нет, то объясни иначе поисковику, что ты обновил страницу, не дожидаясь еще неделю, пока он пройдет и увидит правки.

А еще если у тебя овер много страниц, которые доступны в 3+ касания, то вообще совсем ненужно, подумаешь яндекс не съест страницу, да и пофиг.

Напишите это еще в чате по seo арбитражу, чтобы люди посмеялись.

И продать твой самокат)

даааа

эх ты не пришёл я ведь ждал

там сверху обосрались люди

https://developers.google.com/search/docs/crawling-indexing/robots/intro?hl=ru

А ты нежно и мягко, с удовольствием обкакалась

Если у тебя постоянно происходят ласт-модифиед, значит ты страдаешь фигней). А на яндекс вообще пох, т.к. он говно. Гугл же есть

Something , нэ, гугл вроде пока хавает

Причем тут карта сайта и robots? В robots указываешь лишь доступность для индексации, хотя это можно сделать через no-index в мета-тегах и в robots указать лишь директории запрещенные.

А в карте, т.е. sitemap, ты указываешь все страницы для индексации.

Да ну, у меня к примеру сайт по гембле, и мне нужно постоянно обновлять ключевики, чтобы быть в топе, ls - будет обновлять вместе с этим соответственно...

Все зависит от того, что ты хочешь от сайта. Если сайт на 5 страниц - я соглашусь, нах не нужна карта, ибо робот их быстро обойдет и будет хавать раз в пару дней правки. Если у тебя 1000 страниц и регулярное пополнение или правки, то тут устанешь ждать, пока робот схавает все страницы полностью и правки по ним.