Раскрутка/SEO__ООП | Боты поисковики
NSA 
Привет. Нормально, что на сайте постоянно 40-100 ботов различных поисковиков? Есть ли смысл избавится от них или же пусть читают сайт?
desay 
На крайняк поставь запретку на ботов
и крест им дорога на твой сайт
nefakt, в принципе, не мешают, но смущают в таком количестве.
Закрыть им доступ, не самый хороший вариант.
Закрыть им доступ, не самый хороший вариант.
А как ты узнаешь что это боты ?
nefakt (18.02.2019 в 19:44)
desay, Ну они же тебе не мешают ни как (хотя количество всё таки настораживает).
На крайняк поставь запретку на ботов и крест им дорога на твой сайт
desay, Ну они же тебе не мешают ни как (хотя количество всё таки настораживает).
На крайняк поставь запретку на ботов
и крест им дорога на твой сайт Покажите мне запретку на всех ботов?
запускай понемногу
eni
zeFON, ну как бы:
Браузер: Mozilla/5.0 (compatible; BLEXBot/1.0; +http://webmeup-crawler.com/)
Браузер: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
Браузер: Mozilla/5.0 (compatible; SemrushBot/3~bl; +http://www.semrush.com/bot.html)
Браузер: Mozilla/5.0 (compatible; AhrefsBot/6.1; +http://ahrefs.com/robot/)
Браузер: Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Браузер: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
Браузер: Mozilla/5.0 (compatible; SemrushBot/3~bl; +http://www.semrush.com/bot.html)
Браузер: Mozilla/5.0 (compatible; AhrefsBot/6.1; +http://ahrefs.com/robot/)
Браузер: Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Cezarionis (18.02.2019 в 19:51)
nefakt (18.02.2019 в 19:44)
desay, Ну они же тебе не мешают ни как (хотя количество всё таки настораживает).
На крайняк поставь запретку на ботов и крест им дорога на твой сайт
Покажите мне запретку на всех ботов?
nefakt (18.02.2019 в 19:44)
desay, Ну они же тебе не мешают ни как (хотя количество всё таки настораживает).
На крайняк поставь запретку на ботов
и крест им дорога на твой сайт Покажите мне запретку на всех ботов?
Покажи где написано на всех ботов?
Читай внимательнее потом цитируй
desay (18.02.2019 в 19:47)
nefakt, в принципе, не мешают, но смущают в таком количестве.
Закрыть им доступ, не самый хороший вариант.
nefakt, в принципе, не мешают, но смущают в таком количестве.
Закрыть им доступ, не самый хороший вариант.
Конечно не вариант
Это с твоего спорт сайта? Я не пойму почему такое количество
Может ты дергаешь новости через копирайт и там есть хвосты/ссылки на другие сайты?
Узнаешь причину такого количества ботов, кинь в л/с. Просто интересно самому
Стр.: 1, 2