All Projects

Была обнаружена ошибка на одном из MySQL серверов в среде квотирования из-за непредвиденных обстоятельств. На данный момент времени проблема частично устранена, мы работаем над полным исправлением для предотвращения подобных проблем в будущем.

Мы обнаружили аномальную работу на одном из оборудования сервера с 21:00 MSK. Было резкое повышение нагрузки в течение часа, после чего система зависла из-за нехватки CPU. Мы исключаем программную ошибку, далее вышел из строя кабель питания.

В течение часа была произведена замена кабеля и мы в срочном порядке начали запуск оборудования и игровых серверов оборудования.

Замена кабеля - успешно
Работа систем - в норме

Оборудование зависло в 21:20 (MSK time), нам пришлось обновить BIOS для нормальной загрузки OС. Инцидент больше не требует внимания.

Мы откорректировали правила фильтрации по защите от ботов. Серверы с онлайном от +80 испытывали трудности в подключении к серверу.
Закрыто.
Причина: проблема исправлена.

Мы обнаружили и устранили ошибку, при которой клиент, пополнявший сумму с копейками (пример: 100.50), не получал средства на баланс личного кабинета.

Проблема устранена. Ведутся исправления на стороне FTP сервера от последующих подобных инцидентов.

Нас проинформировали о периодических проблемах со сетью на игровых серверах MTA, которая вызывает ошибку Network Trouble.

Ошибка затронула игровые серверы локации №1
Проблема была исправлена.

Технические подробности:
Устранение ошибки настроек сетевой карты Ethernet Controller 10G X550T.

no task description

Мы подняли отдельную подсеть под сервисы.

В данный момент был изменен IP адрес от FTP сервера и произведены небольшие корректировки по обеспечению стабильности.

Мы произвели обновление версии v1.5.4 R3 (build 11305) - Updated 25th April 2017.

Обновление вступит в силу при перезапуске сервера из панели управления или автоматически в 5:00 MSK.

Мы добавили новый фильтр, значительно подавляющий атаки типа flood. Работа фильтрации стала наиболее интеллектуальной. Атакующий блокируется полностью, если система точно определит, что это не всплеск легитимного трафика от игрока, а DoS/DDoS.

We have added a new antiddos filter to substantially suppress the attacks of the type flood. The filtering operation was the most intelligent. The attacker is blocked completely if the system determines that it is not a surge of legitimate traffic from the player, and DoS/DDoS.

by ADVENS TEAM
antiddos@advens.ru

FastDL сервер был переработан.

На основе сообщений от клиентов:

- Проблем с кешем больше нет.
- Повышена скорость без ограничений.
- Ошибок с объемом загружаемых данных больше нет.

Авторизация к PhpMyAdmin будет теперь строго через личный кабинет.
Мы работаем над этим.

Планируется добавить на игровой хостинг данную игру.

Мы обновили web интерфейс для работы с базами данных MySQL.

По сообщениям, скорость закачки ресурсов через FastDL сервер может снижаться в момент большого количества подключений к FastDL на определенный игровой сервер. Данная проблема имеет не глобального характера, проявляется только у нескольких человек и очень редко, приблизительно у серверов с онлайном выше 300 человек.

- Была произведена корректировка для устранения данный проблемы.

Мы продолжаем следить.

Нам поступают сообщения об отключении системы автоматического рестарта сервера, в частности для MTA серверов.

Был внедрен ‘мягкий’ рестарт для следующих игр:
- MTA
- MINECRAFT

Теперь хостинг отправляет серверу команду на остановку сервера и происходит сохранение всех ресурсов перед выключением.

Планируется добавить на игровой хостинг данную игру.

Планируется добавить на игровой хостинг данную игру.

Планируется добавить на игровой хостинг данную игру.

Планируется добавить на игровой хостинг данную игру.

На данный момент у каждого игрового сервера есть резервные копии, копии баз данных, расположенных на закрытых серверах.

В ближайшее время у каждого заказа появится дополнительный независимый FTP доступ, где будет хранится следующая информация:

1. Папка с БД архивами.
2. Папка с файлами, которые точь-в-точь идентичны (синхронизация в реальном времени с основными файлами клиента)
3. Папка с архивами файлов.
4. Папка с архивами логов игровых серверов.

На каждый сервер гарантирован следующий объем данных:

GAME-1: 25GB
GAME-2: 50GB
GAME-3: 100GB

При достижении лимита - идет очистка старых данных. На практике файлы сжимаются достаточно эффективно, что позволит Вам иметь доступ к файлам месячной и более давности.

Дополнительное резервирование находится на отдельных независимых от основного оборудования мощностях. Помимо этого идет резервирования на основное оборудование с RAID 1 массивом, что обеспечивает сохранность и отказоустойчивость в работе.

За последние сутки из 2 больших атак - нами было подтверждено 100% (=99.0+%) блокирование атаки.

1. Атака на SA:MP сервер (проблема с получением информации в игровом клиенте во время атаки на атакуемый сервер).
2. Массированный syn flood на главный узел хостинга. (При частой проверке доступности через сервисы мониторинга - наша система заносила IP адреса в блокировку) - исправлено, блокируется то, что можно назвать атакой.

В обоих случаях была чуть некорректно настроена фильтрация. Проблема полностью искорена на всех узлах сети.

Хостинг внимательно следит и получает всю информацию по аномалиям незамедлительно. Защита является стабильной и корректировки проводятся довольно редко.

Была обнаружена циклическая переадресация у клиентов, требующие более детального восстановления.

Это было исправлено.

Были проведены несколько корректировок системы защиты для еще большего подавления сложных типов атак уровня L7, при этом никаких воздействий на атакуемый игровой сервер из-за атаки - не было обнаружено.

Продолжаем следить за поведением защиты в момент подобных атак.

Мы подключили дополнительные 3 подсети к нашей защищенной сети:

213.32.120.112/28
213.32.120.176/28
213.32.116.160/27

Подсети обслуживают игровые серверы по тарифу GAME-3. Мы активно продолжаем расширение сетей и обеспечиваем максимальную безопасность сетевой инфраструктуры.

Мы получаем сообщения о проблеме с соединением к игровым серверам и сервисам у процента человек. Мы собрали соответствующую информацию и произведем финальную диагностику в срочном порядке сегодня, которая к сожалению затронет доступность игровых серверов.

Время диагностики сети составит не более 10-ти минут.

Мы завершили диагностику сети, в данный момент мы подготавливаем процесс устранения ошибки.

По сообщениям, у 0.5% игроков изредка возникала ошибка доступности.

- исправили ложное срабатывание (false positive).
- добавлен дополнительный фильтр обеспечения безопасности.

–—––

Reported in 0.5% of the players were occasionally the error availability.

- fixed false positive.
- added additional filter of security.

by ADVENS TEAM
antiddos@advens.ru

Прямо сейчас мы производим оптимизацию работы своей инфраструктуры.

В последнем обновлении защиты обнаружены ложные срабатывания. ADVENS совместно с тестерами на данный момент разбирают инцидент и калибруют защиту.

Мы работаем над модернизацией работы Anti-DDoS системы, параллельно подготавливаем обновление L7-SCAN (l7 фильтр для samp/crmp).

Назначена проверка на наличие корректной работы контент хостинга FastDL.

Это связано с инцидентом в Страсбурге: https://status.advens.ru/task/74

Мы работаем над восстановлением.

Это связано с инцидентом в Страсбурге: https://status.advens.ru/task/74

Мы ожидаем поставку нового оборудования на трех дата центрах Франции, это может занять некоторое время как только мы приступим к его настройке.

Ожидается поставка оборудования в GRA и RBX

С 10:25 MSK возникли проблемы со всей сетью, которая затронула все дата центры из-за человеческого фактора во время перенастройки сети в США.

Оборудование в США изолировано для решения проблемы, сеть постепенно поднимается.

В ближайшее время мы обновим Java на оборудовании, который обслуживает Minecraft серверы, поскольку некоторые новые плагины не корректно работают на Java 7 версии.

1.Мы проводим профилактические работы на оборудовании с целью оптимизировать нагрузку между двумя физическими серверами:

SRV1:90%
SRV2:0%

Оптимизация до:
SRV1:60%
SRV2:30%

2. Подключение автоматической балансировки нагрузки физических серверов.
3. Обновление версии PhpMyAdmin.

Произошел частичный сбой работы сервисов. Центральная работа не приостанавливалась.

Мы расследуем.

Мы подготавливаем запуск отдельного наиболее высокоскоростного FastDL сервера для наибольшей производительности при загрузке “кеша” у серверов MTA.

Обновление фильтрации TCP протокола на игровых локациях.

Были произведены некоторые корректировки и добавление новых фильтров для дополнительного противодействия к атакам с воскресенья прошлой недели. Проблем не обнаружено.

Мы работаем над включением TLS, которое обеспечит шифрование передаваемых данных на FTP сервере.

Мы подняли отдельную подсеть под сервисы.

В данный момент мы планируем вывести PhpMyAdmin на определенные серверы.

Мы подняли отдельную подсеть под сервисы.

Мы планируем вывести файловый хостинг(FastDL) для MTA серверов на отдельный IP адрес.

Мы подняли отдельную подсеть под сервисы.

Мы планируем вывести удаленный доступ к сервису баз данных на отдельный IP адрес. Старый IP адрес будет продолжать обслуживать БД, чтобы не допустить сбои в работе сайтов(UCP систем) клиентов.

Нам поступают сообщения о белом экране при редиректе. Проблема в данный момент решается входом в режим “Инкогнито” браузера.

Мы расследуем.

Было обнаружено, что каждые 20 минут FTP соединение разрывалось со стороны хоста. Это было вызвано некорректной работы мониторинга, отвечающего за проверку процессов пользователя.

Мы обновляем web интерфейс для работы с базами данных MySQL.