Проблемы на форуме

[Жрец Нефтиды]

Я не понял: так что, за каждое обращение к нашему форуму с нас снимают бабло?

[Скерцо]

100 копеек уже рубль.

Это иносказательно. В смысле, что по отдельности вроде не много, а вместе уйма.

[gerik2]

можно по поводу оплаты высказаться? на форуме много материала в зашифрованных архивах на облаке mail.Давайте введем небольшую оплату за пароли или вскрытую ссылку на облако, допустим 100-200р в месяц за пользование паролей деньги доступные и форуму мат помощь

[Likbezz]

Ваша база данных "videofo_rum", серьезно пригружает сервер и мешает нормальному функционированию. Размер ее более: 350 Мб.

Не загоняйтесь за размер, он мизерный - 350 метров - это почти ничто..
Сервак, в данном случае, грузит не база, а высокочастотные обращения к ней.

Вообще бот это программа которая обращается с серверу, а не реальный пользователь. В отлиие от реального пользователя боты делают кучу обращений к форуму и с этим ничего нельзя поделать.

- ну прямо уж нельзя..

<IfModule mod_rewrite.c>
RewriteCond %{HTTP_USER_AGENT} (AhrefsBot|SolomonoBot|MJ12bot|xpymep) [NC]
RewriteRule .* - [F,L]
</IfModule>

..и так далее, перечислить загружающих сайт ботов..
Естественно, “хороших” нужно оставить - яндекс, там, гугл и тп.
[Для просмотра данной ссылки нужно зарегистрироваться]
---

Нужен хостинг с защитой от ddos, либо выделенный сервер

- я не думаю, что ваш хост так уж непрерывно гасят DDoS атаками..

А так, по теме, если уж на то пошло - есть модификации типа - кеширование для гостей и ботов - там вообще запросы к базе сводятся практически к нулю.
Работает по типу - скрипт определяет гость это или бот, и отдает ему сохраненную копию страницы, безо всяких запросов к bd.
Копии обновляются при добавлении сообщения.
Следовательно, старые темы, в которых никто не пишет, практически не будут создавать никакой нагрузки..

Да и вообще, вам нужно смотреть в сторону оптимизации форума, а не в сторону наращивания ресурсов.
Ибо даже [Для просмотра данной ссылки нужно зарегистрироваться] в год (Ядер 2, 2048 Mb, SSD 75 Gb), для вашего форума - более, чем требуется.
Я даже не могу представить, если честно, куда можно израсходовать такие ресурсы..

[rococo795]

Likbezz
Привет... В ассемблере не силён случаем????

[Likbezz]

rococo795,

Привет... В ассемблере не силён случаем????

Добрый)
Нет, php и то так, основы..
Вот JavaScript - лучше ) можно сказать хорошо. Так что с этим - ко мне, подскажу если что)

[rococo795]

Likbezz
Понял... Спасибо..

[Vitaly]

Сообщение от Likbezz

Не загоняйтесь за размер, он мизерный - 350 метров - это почти ничто..
Сервак, в данном случае, грузит не база, а высокочастотные обращения к ней.

- ну прямо уж нельзя..

<IfModule mod_rewrite.c>
RewriteCond %{HTTP_USER_AGENT} (AhrefsBot|SolomonoBot|MJ12bot|xpymep) [NC]
RewriteRule .* - [F,L]
</IfModule>

..и так далее, перечислить загружающих сайт ботов..

При чем тут известные боты? Для них в robots.txt можно просто указать

User-agent: *
Crawl-delay: 10

или другое ограничение по времени и никакой нагрузки они не создадут, да собственно и не создают. А ограничивать не стоит, тот-же SolomonoBot вполне себе полезная штука, сам пользуюсь иногда этим сайтом.
Другое дело, когда нагрузку создают нехорошие боты, которые не смотрят в роботс.тхт и задача у них положить сервер.

Сообщение от Likbezz

- я не думаю, что ваш хост так уж непрерывно гасят DDoS атаками..

А вы подумайте, могу даже при следующей атаке показать логи апача. Там кстати айпишек одинаковых вообще нет и даже из одной подсети всего несколько адресов, с которых идет лишь несколько обращений. Т.е. забанить по ip или по подсети практически невозможно.

Ибо даже VDS-ка за 200$ в год (Ядер 2, 2048 Mb, SSD 75 Gb), для вашего форума - более, чем требуется.

Естественно со стороны вам виднее, чем нашему хостеру, что нам нужно.

[Likbezz]

Vitaly,

При чем тут известные боты? Для них в robots.txt можно просто указать

А при чем здесь роботс? Стучаться-то они будут несмотря на роботс..
Вы, видимо, не совсем в теме, про что я..

Начнем с того, что директиву Crawl-delay понимают не все боты - это один, а два - xpymepу и прочим прогам-спамерам-стучалкам глубоко плевать что вы там указали в роботс.

от-же SolomonoBot вполне себе полезная штука, сам пользуюсь иногда этим сайтом

Вы пользуетесь, а я нет.
Данный код не панацея от вашей проблемы, а лишь пример что можно снизить нагрузку ограничивая доступ некоторым ботам напрягающим ваш сайт.

могу даже при следующей атаке показать логи апача

Буду ждать.
Ибо кто вы такие, что бы тратить на вас такие ресурсы, какие требуются для приличной ddos-атаки.

Там кстати айпишек одинаковых вообще нет

Скажите еще что юзерагент у каждого запроса разный...

Естественно со стороны вам виднее, чем нашему хостеру, что нам нужно.

Конечно виднее, ибо я лишен некоторых ваших предрассудков и делаю выводы исходя из цифр.
А они таковы:
На сайте у вас сейчас:
11 пользователей, и 82 гостя.
Следовательно, одновременно у вас не бывает больше 200 уников.
Сейчас у вас nix под шаредом на 128 метров оперативы.
И форум работает.
Вопрос:
Зачем вам нужен выделенный сервак с восемью гигами (8192 мегабайт) оперативы и четырьмя ядрами ([Для просмотра данной ссылки нужно зарегистрироваться]) за 700$? если вы и так более-менее нормально обходитесь 128 мегабайтами?
Вам будет более чем достаточно VDS-ки, что я указал выше. Намного “более-чем“.

Естественно со стороны вам виднее, чем нашему хостеру

Мнение вашего хостера по смене тарифного плана я не слышал, читал лишь [Для просмотра данной ссылки нужно зарегистрироваться].
И утверждаю, что оно не совсем адекватное.
Вам не кажется, что если вы не можете проехать куда-то на легковушке - это не повод покупать вертолет?.. м?

Хостер же пишет:

Ваша база данных "videofo_rum", серьезно пригружает сервер и мешает нормальному функционированию. Размер ее более: 350 Мб. По всей видимости она забита записями от ботов, которые ее спамят круглосуточно и в огромном количестве, мы ее вынуждены заблокировать до устранения данной ситуации.

..и не более..

[Vitaly]

А при чем здесь роботс? Стучаться-то они будут несмотря на роботс..
Вы, видимо, не совсем в теме, про что я..

Начнем с того, что директиву Crawl-delay понимают не все боты - это один, а два - xpymepу и прочим прогам-спамерам-стучалкам глубоко плевать что вы там указали в роботс.

Цитата:
от-же SolomonoBot вполне себе полезная штука, сам пользуюсь иногда этим сайтом
Вы пользуетесь, а я нет.
Данный код не панацея от вашей проблемы, а лишь пример что можно снизить нагрузку ограничивая доступ некоторым ботам напрягающим ваш сайт.

Объясняю еще раз. Все поисковые боты понимают директиву Crawl-delay. Все указанные вами кроме xpymep естественно тоже её понимают.
Нагрузка на форум возникла не из-за этих ботов, соответственно ограничение доступа для них проблемы не решает.

Там кстати айпишек одинаковых вообще нет
Скажите еще что юзерагент у каждого запроса разный...

Да не разный там юзер агент, обычный как из разных браузеров идет

Mozilla/4.0 (compatible; MSIE 6.0; Windows XP)
Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.1) Gecko/20061204 Firefox/2.0.0.1
Mozilla/5.0 (Windows NT 6.1; WOW64; rv:42.0) Gecko/20100101 Firefox/42.0

Когда вы заходите из своего браузера на форум, вы ничем не отличаетесь от того бота, кроме айпи конечно
Заблокировать ботов по юзерагенту это бред, боты могут хоть под яндекса, хоть под гугла маскироваться,
Но нашем случае они просто ставят случайную версию браузера и ОС.

Конечно виднее, ибо я лишен некоторых ваших предрассудков и делаю выводы исходя из цифр.
А они таковы:
На сайте у вас сейчас:
11 пользователей, и 82 гостя.
Следовательно, одновременно у вас не бывает больше 200 уников.

Ну раз вы так на цифры ориентируетесь посмотрите внизу форума есть статистика присутствующих (Кто на форуме),
обратите внимание, что пока не упал сервер, форум зафиксировал

Рекорд одновременного пребывания 12,964, это было 24.11.2015 в 14:27.

в данном случае не 200 уников, а почти 13000

Остальные ваши размышления по поводу того, что нам нужно оставьте при себе.