Що ми робимо · Експлуатація: Моніторинг парку та маршрутизація тривог
За кожною машиною, комутатором, firewall, масивом сховища, блоком розподілу живлення та веб-адресою клієнта, за які ми відповідаємо, стежить одна центральна платформа Zabbix, щохвилини кожного дня. Коли щось іде не так, тривога опиняється перед черговим інженером протягом секунд, зазвичай раніше, ніж перший відвідувач взагалі щось помітить. Кожна тривога також отримує другу думку від AI, який працює на наших власних GPU, у нашому власному дата-центрі.
Що це
- h2: Що це
Єдина платформа моніторингу, яка бачить увесь парк: операційні системи, бази даних, мережеві пристрої, сховища, живлення і сторінки, які реально завантажують ваші клієнти. Вона напряму під’єднана до чат-системи, в якій живуть наші інженери, тож тривога є повідомленням людині, а не рядком у журналі.
Для кластерів клієнтів ми моніторимо зсередини назовні. Вимірюються операційна система, рушій бази даних і застосунок, а батарея реальних перевірок HTTP запитує ваші реальні сторінки, оформлення замовлення, вхід, сторінку статті, API endpoint, і перевіряє, що кожна відповідає правильно і швидко.
Як ми це будуємо
-
h2: Як ми це будуємо
-
Агент на кожному хості. Кожен сервер у кластері клієнта отримує агент Zabbix і повний шаблон операційної системи, а хости реєструються самі при першому контакті, тож нова машина ніколи не забувається.
- Метрики бази даних через користувача лише для читання. Стан реплікації, з’єднання, поведінка буферів і повільні запити зчитуються через окремий обліковий запис моніторингу.
- Ваші сторінки, перевірені з сервера. Ми погоджуємо з вами, які URL-адреси важливі, зазвичай від десяти до п’ятнадцяти, і перевіряємо кожну на код стану, вміст і час відповіді.
- Тривоги людям, а не у поштові скриньки. Тривоги високої та критичної важливості йдуть через webhook у виділений операційний канал у Mattermost, де черговий інженер уже є, вдень і вночі. Після кожної зміни платформи моніторингу ми доводимо ланцюжок наскрізно реальною тривогою, з вимірюванням часу від тригера до повідомлення.
- Друга думка від локального AI. Спочатку правила відфільтровують відомий шум. Усе, що залишилося, аналізується в реальному часі моделями AI, які працюють на наших власних GPU NVIDIA A100, у нашому власному дата-центрі. Аналіз співвідносить тривогу з недавніми подіями, пов’язаними хостами та відомими шаблонами і ставить другу думку поруч із тривогою для інженера. Ваші дані моніторингу ніколи не залишають нашу інфраструктуру і ніколи не надсилаються публічному AI-сервісу.
- Пороги налаштовані на кожен хост, ніколи не вимикаються наосліп. Ми задаємо перевизначення на рівні хоста замість редагування спільних шаблонів, тож налаштування однієї машини ніколи не змінює тривоги на іншій, а тригер ніколи не вимикається лише заради зеленої панелі.
- За монітором стежать. Сама платформа моніторингу проходить аудит згори донизу (обладнання, операційна система, база даних, демон, шлях сповіщення) і працює на стисненій базі часових рядів із примусовим терміном зберігання.
Від чого це вас захищає
-
h2: Від чого це вас захищає
-
Збій, про який ви вперше дізнаєтеся від клієнта.
- Сайт, який повертає сторінку, але не ту сторінку, або помилку, замасковану під сторінку.
- Репліка бази даних, яка тихо перестала реплікуватися кілька днів тому.
- Втома від тривог: хости, які червоні місяцями, доки ніхто вже не дивиться.
- Система моніторингу, яка сама виходить з ладу, виглядаючи здоровою.
На практиці
- h2: На практиці
Кластер новинного видавця, підключений за ранок. Новинний видавець перемістив до нас свій кластер застосунків. За один ранок кожен вузол мав агент і повний шаблон, база даних мала свого користувача моніторингу лише для читання, а батарея з п’ятнадцяти реальних перевірок сторінок, що охоплювала головну, сторінки статей і стрічки, працювала, кожна з них зелена. Відтоді повільна сторінка статті є тим, що ми бачимо першими.
Чому EuroVPS
-
h2: Чому EuroVPS
-
Одна платформа бачить ваші сервери, ваш мережевий шлях, ваше сховище і ваше живлення, тож симптом простежується до причини в одному місці.
- Тривоги досягають конкретного чергового інженера 24/7 за секунди, з AI-аналізом у реальному часі на наших власних GPU NVIDIA A100 поруч із ними.
- Ми перевіряємо ваші реальні сторінки, а не лише те, чи відповідає сервер на ping.
- Пороги налаштовані під ваші машини, а не залишені на типових значеннях постачальника, які кричать «вовк».
- Люди, які читають тривогу, це ті самі люди, які побудували вашу платформу і можуть її полагодити.
Часті запитання
- h2: Часті запитання
Чи можу я бачити графіки та тривоги для своїх серверів? Так. Ми можемо дати вам доступ лише для читання до ваших хостів або надсилати вам зведення за розкладом. Більшість клієнтів просто покладаються на те, що ми реагуємо на тривогу і повідомляємо їм, що сталося.
Які сторінки ви перевіряєте? Ті, що приносять вам гроші або поставили б вас у незручне становище, якби зламалися. Ми погоджуємо список з вами на початку і змінюємо його щоразу, коли змінюється ваш сайт.
Чи надсилає AI мої дані кудись? Ні. Моделі працюють на наших власних GPU NVIDIA A100 у нашому власному дата-центрі. Ніщо не залишає нашу мережу, і ніщо не йде до публічного AI-сервісу.
Що відбувається, коли тривога спрацьовує о 3-й ночі? Вона досягає чергового інженера протягом секунд, і той негайно розслідує. Якщо це стосується вас, ви отримуєте від нас тікет, часто ще до того, як щось помітили.
Чи відкриваєте ви тікети проактивно? Так. Багато наших тікетів починаються з нашого боку, бо наш моніторинг побачив щось першим.
Якщо хочете, щоб за вашою платформою стежили люди, які самі відповідають на тривогу, Поговоріть з інженером.
Ваш наступний партнер з інфраструктури
Погляньмо на вашу інфраструктуру.
Розкажіть, що ви запускаєте сьогодні і що потребує покращення. Інженер розгляне ваш запит і допоможе спланувати наступний крок.
+357 222 32280
Почнімо з вашої інфраструктури.
Трохи контексту допомагає нам почати правильну розмову.