AXForum  
Вернуться   AXForum > Прочие обсуждения > Обсуждение форума
All
Забыли пароль?
Зарегистрироваться Правила Справка Пользователи Сообщения за день Поиск Все разделы прочитаны

 
 
Опции темы Поиск в этой теме Опции просмотра
Старый 27.06.2011, 13:10   #61  
mazzy is offline
mazzy
Участник
Аватар для mazzy
Лучший по профессии 2015
Лучший по профессии 2014
Лучший по профессии AXAWARD 2013
Лучший по профессии 2011
Лучший по профессии 2009
 
29,472 / 4494 (208) ++++++++++
Регистрация: 29.11.2001
Адрес: Москва
Записей в блоге: 10
анекдот:
= в прошлом году мы посадили 6 гектар овса. хомяк его съел
= в этом году мы посадили 7 гектар овса. хомяк его съел
= с следующем году мы посадим 8 гектар овса. пусть подавится, зараза.
=====================

боты неистовствуют. прикидываются людьми. подстраиваются под лимиты.
но все равно выкачивают больше, чем люди, поскольку неутомимо долбят.
соотношение по выкачиваемому чуть больше, чем 4:1 в пользу ботов.
соотношение по числу запросов - 14:1 в пользу ботов.
Нажмите на изображение для увеличения
Название: 1.PNG
Просмотров: 221
Размер:	30.9 Кб
ID:	6958

смешно выглядит "пиковая нагрузка" из начала этой ветки - 100Kb/s на отдаче
сегодня это "обычная нагрузка".
Название: 2.PNG
Просмотров: 1198

Размер: 39.4 Кб

"неизвестный бот" от одной компании-партнера более-менее укрощен.
на скриншоте ниже он отображен как "Unknown robot (identified by 'robot').
но начал "зверствовать" mail.ru-бот, подстраиваясь под частотные ограничения.
Нажмите на изображение для увеличения
Название: 3.PNG
Просмотров: 193
Размер:	26.3 Кб
ID:	6960

==================
к чему это я?
приношу свои извинения за доставленные неудобства и возможные тормоза форума.
будем бороться с ботами в пользу людей.

приоритеты - людям!
__________________
полезное на axForum, github, vk, coub.
Старый 01.07.2011, 14:07   #62  
mazzy is offline
mazzy
Участник
Аватар для mazzy
Лучший по профессии 2015
Лучший по профессии 2014
Лучший по профессии AXAWARD 2013
Лучший по профессии 2011
Лучший по профессии 2009
 
29,472 / 4494 (208) ++++++++++
Регистрация: 29.11.2001
Адрес: Москва
Записей в блоге: 10
в качестве отчета по проделанной работе (вдруг кому-то будет интересно)

в завершившемся июне был поставлен рекорд форума - всего с него выкачано более 110Гб. Из них более 90Гб выло выкачано ботами. (1)
За счет кэширование, перераспределения имеющихся ресурсов, изменения настроек удалось почти вдвое сократить объем данных, которые отдаются людям (2), одновременно удалось почти вдвое увеличить (3) число хитов (выполненные запросыот людей)

Другими словами, форум отвечает большему числу людей, отвечает чаще, скорость реакции выше и грузит каналы меньше.
Нажмите на изображение для увеличения
Название: 1.PNG
Просмотров: 183
Размер:	39.9 Кб
ID:	6973

за истекший июнь-месяц удалось обуздать безумных ботов-скачивальщиков.
однако все равно среди цивилизованных и приличных поисковых ботов отъявленным гопником выглядит mail.ru. Пока его не сильно режем, но при первых признаках нехватки ресурсов он будет первым кандидатом в баны.
Нажмите на изображение для увеличения
Название: 2.PNG
Просмотров: 218
Размер:	29.2 Кб
ID:	6974

отдельно хотелось бы сказать о всяких ботах-ломальщиках, ботах-спамерах и прочей нечисти, которая попала в пункт "остальное". в принципе их тоже ограничили, но частота обращения к странице регистрации показывает, что с нечистью еще можно будет побороться (примечание: я не хотел бы вдаваться в детали, но страница регистрации так устроена что она часто используется для взлома/хака форума)
Нажмите на изображение для увеличения
Название: 3.PNG
Просмотров: 199
Размер:	27.5 Кб
ID:	6975

хотелось бы показать немного истории (3 месяца):
Название: 4.PNG
Просмотров: 1210

Размер: 50.1 Кб
1 - период до тормозов - спокойная и размеренная жизнь
2 - одновременно активизировалось несколько ботов. первым был, похоже, таки яндексовкий. хотя он быстро исправился. в этот период мы пытаемся изменить количественные параметры форума. в конце периода были внесены кардинальные структурные изменения в настройки
3 - оптимизация и фиксация новых настроек. отладка.
4 - работа с зафиксированными настройками

С 26.06 незамеченной прошла неделя новой активизации ботов.
И хорошо, что участники этого не заметили.

=========
Спасибо вам за терпение и понимание.
__________________
полезное на axForum, github, vk, coub.
За это сообщение автора поблагодарили: sukhanchik (5), Aleksey_M (5), gl00mie (5).
Старый 20.07.2011, 17:27   #63  
lvan is offline
lvan
Участник
Аватар для lvan
Лучший по профессии 2014
 
856 / 82 (4) ++++
Регистрация: 15.04.2011
Записей в блоге: 1
работа то проделана.
а результат нулевой
опять еле-еле дышит
Старый 20.07.2011, 18:12   #64  
AndyD is offline
AndyD
Участник
КОРУС Консалтинг
Лучший по профессии 2015
Лучший по профессии 2014
Лучший по профессии AXAWARD 2013
Лучший по профессии 2011
 
2,560 / 2476 (88) +++++++++
Регистрация: 20.08.2005
Поддерживаю

Форум ощутимо тормозит при открытии сообщений, поиске, сохранении ответов на сообщения
__________________
Axapta v.3.0 sp5 kr2
Старый 20.07.2011, 21:00   #65  
mazzy is offline
mazzy
Участник
Аватар для mazzy
Лучший по профессии 2015
Лучший по профессии 2014
Лучший по профессии AXAWARD 2013
Лучший по профессии 2011
Лучший по профессии 2009
 
29,472 / 4494 (208) ++++++++++
Регистрация: 29.11.2001
Адрес: Москва
Записей в блоге: 10
Цитата:
Сообщение от lvan Посмотреть сообщение
работа то проделана.
а результат нулевой
больше 100-140 одновременных посетителей в пиковое время,
форум увеличивается на 11Мб данных в месяц,
download более 100Гб данных в месяц.
месяц безмятежной жизни при все увеличивающемся количестве ботов.

и "результат нулевой". ну-ну.

Цитата:
Сообщение от AndyD Посмотреть сообщение
Форум ощутимо тормозит при открытии сообщений, поиске, сохранении ответов на сообщения
да, сейчас идет очередная волна вот таких вот загадошных товарищей с загадошными запросами.
ломают-с.

не планирую вносить серьезные изменения в течение недели.
в выходные попробуем переналадить в соответствии с логами.
Миниатюры
Нажмите на изображение для увеличения
Название: 2.PNG
Просмотров: 322
Размер:	69.2 Кб
ID:	7000  
Изображения
 
__________________
полезное на axForum, github, vk, coub.
Старый 25.07.2011, 09:36   #66  
mazzy is offline
mazzy
Участник
Аватар для mazzy
Лучший по профессии 2015
Лучший по профессии 2014
Лучший по профессии AXAWARD 2013
Лучший по профессии 2011
Лучший по профессии 2009
 
29,472 / 4494 (208) ++++++++++
Регистрация: 29.11.2001
Адрес: Москва
Записей в блоге: 10
каковы впечатления сегодня?
__________________
полезное на axForum, github, vk, coub.
Старый 14.02.2012, 11:56   #67  
Lucky13 is offline
Lucky13
Участник
1C
 
714 / 198 (8) ++++++
Регистрация: 21.10.2004
Что-то сегодня с утра конкретные тормоза были. По-моему, форум не мог достучаться до img.axforum.info
Старый 14.02.2012, 23:10   #68  
mazzy is offline
mazzy
Участник
Аватар для mazzy
Лучший по профессии 2015
Лучший по профессии 2014
Лучший по профессии AXAWARD 2013
Лучший по профессии 2011
Лучший по профессии 2009
 
29,472 / 4494 (208) ++++++++++
Регистрация: 29.11.2001
Адрес: Москва
Записей в блоге: 10
понял. спасибо. посмотрю.
__________________
полезное на axForum, github, vk, coub.
Старый 15.02.2012, 10:43   #69  
Ivanhoe is offline
Ivanhoe
Участник
Аватар для Ivanhoe
Лучший по профессии 2017
Лучший по профессии 2015
Лучший по профессии 2014
Лучший по профессии AXAWARD 2013
Лучший по профессии 2011
 
4,143 / 2155 (80) +++++++++
Регистрация: 29.09.2005
Адрес: Санкт-Петербург
Если форум еще у Infobox, то вчера они извинялись за DDOS атаки на свои сервера.
__________________
Ivanhoe as is..
Старый 15.02.2012, 11:58   #70  
mazzy is offline
mazzy
Участник
Аватар для mazzy
Лучший по профессии 2015
Лучший по профессии 2014
Лучший по профессии AXAWARD 2013
Лучший по профессии 2011
Лучший по профессии 2009
 
29,472 / 4494 (208) ++++++++++
Регистрация: 29.11.2001
Адрес: Москва
Записей в блоге: 10
ага. там.
да, извинялись.
плюс выполнены регламентные работы по обслуживанию баз.
__________________
полезное на axForum, github, vk, coub.
Теги
форум

 

Похожие темы
Тема Автор Раздел Ответов Посл. сообщение
Форум тормозит после переноса на новый хостинг? (можно выбрать несколько вариантов ответа) mazzy Обсуждение форума 46 26.01.2011 13:37
Форум тормозит? Опять начинаем пробивать лимиты провайдера. mazzy Обсуждение форума 9 05.10.2010 14:58
Форум тормозит или мне кажется? mazzy Обсуждение форума 27 11.06.2010 11:44
Сегодня 03.07.06 форум тормозит? mazzy Обсуждение форума 5 03.07.2006 16:39
Движок обновлен, форум переехал. Ваши впечатления? mazzy Обсуждение форума 314 27.04.2006 12:30
Опции темы Поиск в этой теме
Поиск в этой теме:

Расширенный поиск
Опции просмотра

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.
Быстрый переход

Рейтинг@Mail.ru
Часовой пояс GMT +3, время: 21:39.
Powered by vBulletin® v3.8.5. Перевод: zCarot
Контактная информация, Реклама.