Zenway

Linux - это интересно!

Вы не вошли.

#1 03-05-2019 17:28:27

BigOrange
Модератор
Откуда: Саратов
Здесь с 20-11-2010
Сообщений: 2,303
LinuxUnknown

На сайте роботы пасуться

Замечаю, что на форуме мелькают всякие боты темах:

AhrefsBot
SemrushBot

народ от них всячески отгораживается, запрещают их в .htaccess
это действительно беда беда и нажор трафика?
или не стоит кипеш разводить?


Долой DE! Даёшь WM!

Вне форума

#2 03-05-2019 18:14:17

redix
Участник
Откуда: Shangri-La
Здесь с 14-02-2013
Сообщений: 2,398
Windows 7Chrome 73.0

Re: На сайте роботы пасуться

Это два безвредных бота, первый - маркетинговый, второй - SEO бот, это легко гуглицца. )))


In Tux We Trust

Вне форума

#3 03-05-2019 18:32:30

BigOrange
Модератор
Откуда: Саратов
Здесь с 20-11-2010
Сообщений: 2,303
LinuxUnknown

Re: На сайте роботы пасуться

@redix, эх... не гуглю с недавних пор
а гуси предлагают их запрещать.
по идее если сайтодержатель хочет быть в топах, - то ему этих ботов надо наоборот приманивать всячески,
а кто не хочет, -  блокировать


Долой DE! Даёшь WM!

Вне форума

#4 03-05-2019 18:38:43

redix
Участник
Откуда: Shangri-La
Здесь с 14-02-2013
Сообщений: 2,398
Windows 7Chrome 73.0

Re: На сайте роботы пасуться

BigOrange пишет:

не гуглю с недавних пор

Что мешает? Вот глянь какая модная стартовая страница у сусей: https://www.opensuse.org/searchPage/


In Tux We Trust

Вне форума

#5 03-05-2019 19:04:14

BigOrange
Модератор
Откуда: Саратов
Здесь с 20-11-2010
Сообщений: 2,303
LinuxUnknown

Re: На сайте роботы пасуться

))
там такие же результаты, очерёдность немного другая
а так, те же рецепты по борьбе с этими ботами

п.с. в гусях если перед запросом написать g! то будет и гугль без капчей
но к этому давно не прибегаю, разве чтобы убедиться, что я ничего не пропустил


Долой DE! Даёшь WM!

Вне форума

#6 10-05-2019 19:18:17

vovans
Администратор
Откуда: Ростов-на-Дону
Здесь с 19-10-2010
Сообщений: 513
Сайт
Windows 10Firefox 66.0

Re: На сайте роботы пасуться

Давайте без паники! )) и не будем никаких ботов никуда отправлять )))) Они работают и делают своё дело, никому не мешают smile


zenway admin

Вне форума

#7 15-05-2019 06:30:25

svm
Модератор
Откуда: N-sk 54.93, 82.89
Здесь с 04-12-2017
Сообщений: 138
Сайт
LinuxFirefox 60.0

Re: На сайте роботы пасуться

20994305_robot.jpg


Умный поймёт , а дураку и так всё равно.

Вне форума

#8 29-06-2019 14:19:07

Goras
Участник
Откуда: Самара
Здесь с 29-06-2019
Сообщений: 1
Сайт
Windows 8.1Opera 60.0

Re: На сайте роботы пасуться

BigOrange пишет:

Замечаю, что на форуме мелькают всякие боты темах:

AhrefsBot
SemrushBot

народ от них всячески отгораживается, запрещают их в .htaccess
это действительно беда беда и нажор трафика?
или не стоит кипеш разводить?

Семраш и Ахрефс самые популярные боты везде. Без них ну никак))


Для продления полового акта лекарственный препарат нового поколения для мужчин дапоксетин купить https://gra-gra.ru/dapoxetin.html с доставкой. Качественное средство продлевающее время полового акта в 4 раза. Одна таблетка и твой половой акт будет длится дольше чем обычно

Вне форума

#9 29-06-2019 21:02:26

Хаха
Гость
Windows 7Firefox 67.0

Re: На сайте роботы пасуться

@Goras спамер!  lol

#10 23-08-2019 23:09:24

redix
Участник
Откуда: Shangri-La
Здесь с 14-02-2013
Сообщений: 2,398
LinuxChrome 76.0

Re: На сайте роботы пасуться

Google, Bing, Yahoo, Facebook, etc - Bot IP Addresses: https://myip.ms/info/bots/Google_Bing_Y … esses.html


In Tux We Trust

Вне форума

#11 26-08-2019 09:32:21

BigOrange
Модератор
Откуда: Саратов
Здесь с 20-11-2010
Сообщений: 2,303
LinuxUnknown

Re: На сайте роботы пасуться

Duckduck Bot - вот этого ни разу не встречал
а он оказывается есть


Долой DE! Даёшь WM!

Вне форума

#12 26-08-2019 10:32:48

redix
Участник
Откуда: Shangri-La
Здесь с 14-02-2013
Сообщений: 2,398
LinuxChrome 76.0

Re: На сайте роботы пасуться

Яндекс - чемпион по количеству ботов, кто бы сомневался. )))


In Tux We Trust

Вне форума

Сейчас в этой теме пользователей: 0, гостей: 1
[Bot] claudebot

Подвал форума

Под управлением FluxBB
Модифицировал Visman

[ Сгенерировано за 0.017 сек, 9 запросов выполнено - Использовано памяти: 1.64 Мбайт (Пик: 1.74 Мбайт) ]