ЕСОЗ - Система моніторингу - Зверніть увагу на історію

Незначний збій у роботі ЦБД ЕСОЗ

Сторінка моніторингу працездатності ЦБД ЕСОЗ містить актуальні дані про роботу основних компонентів Системи. У дашборд оперативно вносяться інциденти, які виникають у центральній базі даних, статус їх опрацювання та вирішення.

На шкалі фіксуються інциденти (затримки в роботі), які могли виникати протягом останніх 90 днів. Для того, щоб отримати інформацію про роботу конкретного модулю, достатньо навести курсор на шкалу й обрати необхідну дату — актуальний стан роботи функціональності з’явиться на екрані.

Моніторинг актуального стану функціональностей:

Зверніть увагу на історію

серп. 2021

Нестабільна робота ЦБД ЕСОЗ
  • Вирішено
    Вирішено

    Система працює нормально, збої не фіксуються.

  • Моніторинг
    Моніторинг

    Венесено виправлення. Спостерігаємо за результатами

  • Визначено
    Визначено

    Згідно даних системи моніторингу 10% запитів продовжують завершуватись збоєм. Працюємо над виправленням.

  • Моніторинг
    Моніторинг

    Проведено роботи по стабілізації роботи проксі сервера. Спостерігаємо за станом системи.

  • Визначено
    Визначено

    Знайдено проблему на боці проксі сервера

  • Вивчається
    Вивчається

    Згідно повідомлень від представників МІС, відбувається накопичення медичних подій в чергах на їх боці. Проведена перевірка підтверджує відмову в обробці частини ЕМЗ. Досліджуємо питання.

Збільшення ресурсів середовища Prod
  • Завершено
    30 серпня, 2021 у 18:24
    Завершено
    30 серпня, 2021 у 18:24

    Обслуговування завершено.

  • Під час виконання
    30 серпня, 2021 у 18:22
    Під час виконання
    30 серпня, 2021 у 18:22

    Проводиться додавання ресурсів.

  • Ще не почалося
    30 серпня, 2021 у 18:00
    Ще не почалося
    30 серпня, 2021 у 18:00

    30.08.2021 о 21:00 плануються технічні роботи з обслуговування середовища Prod.
    Мета робіт: збільшення кількості обробників ЕМЗ та супутніх мікросервісів.
    Орієнтовна тривалість робіт: до 15 хвилин.
    Протягом виконання робіт середовище буде недоступно.

Затримки в обробці ЕМЗ
  • Вирішено
    Вирішено

    Черги не фіксуються.

  • Моніторинг
    Моніторинг

    Додано ресурсів до компонентів, що не вимагають технологічної зупинки.

  • Визначено
    Визначено

    Пік навантаження "відкладеного попиту" пройдено. Заплановано додавання ресурсів до середовища Prod

  • Вивчається
    Вивчається

    Реєструються затримки в роботі компонета ЕМЗ у зв'язку з збільшеним навантаженням на систему.

Обслуговування середовища Prod
  • Завершено
    28 серпня, 2021 у 03:21
    Завершено
    28 серпня, 2021 у 03:21

    Міграція завершилась вдало, реліз 8.22.1 завершено.

    Трафік запущено.

  • Під час виконання
    27 серпня, 2021 у 19:05
    Під час виконання
    27 серпня, 2021 у 19:05

    Зупиняємо трафік на середовище Prod

  • Ще не почалося
    27 серпня, 2021 у 19:00
    Ще не почалося
    27 серпня, 2021 у 19:00

    Cьогодні 27.08.2021 о 22:00 ми плануємо провести обслуговування середовища Prod.
    Мета робіт: закінчення міграції для підготовки до встановлення релізу 8.22.1
    Орієнтовна тривалість робіт: 8 годин.
    Протягом проведення обслуговування середовище буде недоступно.

Планові технічні роботи НАІС
  • Завершено
    27 серпня, 2021 у 01:55
    Завершено
    27 серпня, 2021 у 01:55

    Планові технічні роботи в НАІС завершено.

  • Під час виконання
    27 серпня, 2021 у 01:54
    Під час виконання
    27 серпня, 2021 у 01:54

    Проводяться планові технічні роботи в НАІС

  • Ще не почалося
    26 серпня, 2021 у 21:00
    Ще не почалося
    26 серпня, 2021 у 21:00

    З 00:00 до 04:00 27.08.2021 ДП "НАІС" буде проводити планові регламентні роботи з технічного обслуговування обладнання, що забезпечує роботу Єдиних та Державних реєстрів, створення та забезпечення функціонування яких належить до компетенції Міністерства юстиції України.

    ⚠️У зв’язку з чим, у вказаний період робота Єдиних та Державних реєстрів може бути нестабільною.

лип. 2021

8.21.5 Встановлення виправлень на Prod
  • Завершено
    28 липня, 2021 у 18:47
    Завершено
    28 липня, 2021 у 18:47

    Середовище Prod запущено в роботу.

  • Під час виконання
    28 липня, 2021 у 18:01
    Під час виконання
    28 липня, 2021 у 18:01

    Зупинка середовища Prod

  • Ще не почалося
    28 липня, 2021 у 18:00
    Ще не почалося
    28 липня, 2021 у 18:00

    Шановні колеги, 28.07.2021 о 21:00 заплановано провести встановлення виправлень на середовищі Prod.
    Протягом проведення розгортання виправлень середовище буде недоступно.
    Орієнтовна тривалість робіт: від 10 хв.
    Опис змін : https://e-health-ua.atlassian.net/wiki/spaces/EH/pages/5189926920/Prod+8.21.5+hotfix+CSI+June

Проблема з відправкою SMS
  • Вирішено
    Вирішено

    Підтверджено виправлення проблеми по даним системи моніторингу

  • Моніторинг
    Моніторинг

    Повідомлення про виправлення проблеми з відправкою SMS

  • Визначено
    Визначено

    Звернулись в службу підтримки оператора

  • Вивчається
    Вивчається

    Джерело повідомлення про проблему: отримання сповіщення від системи моніторингу
    Попередньо встановлена причина проблем: збій на стороні првайдера послуг відправки SMS

Планові роботи з технічного обслуговування обладнання Єдиних та Державних реєстрів
  • Завершено
    23 липня, 2021 у 04:00
    Завершено
    23 липня, 2021 у 04:00

    Завершено планові роботи з технічного обслуговування обладнання Єдиних та Державних реєстрів

  • Під час виконання
    22 липня, 2021 у 21:05
    Під час виконання
    22 липня, 2021 у 21:05

    Проводяться планові роботи з технічного обслуговування обладнання Єдиних та Державних реєстрів

  • Ще не почалося
    22 липня, 2021 у 21:00
    Ще не почалося
    22 липня, 2021 у 21:00

    Планові технічні роботи❗️

    🕰З 00:00 до 08:00 23.07.2021 ДП "НАІС" буде проводити планові регламентні роботи з технічного обслуговування обладнання, що забезпечує роботу Єдиних та Державних реєстрів, створення та забезпечення функціонування яких належить до компетенції Міністерства юстиції України.

    ➡️У зв’язку з чим, у вказаний період робота Єдиних та Державних реєстрів може бути нестабільною.

    Приносимо вибачення за тимчасові незручності та дякуємо за розуміння.

Планове технічне обслуговування обладнання у оператора відправки SMS
  • Завершено
    14 липня, 2021 у 23:00
    Завершено
    14 липня, 2021 у 23:00

    Обслуговування закінчено.

  • Ще не почалося
    14 липня, 2021 у 20:30
    Ще не почалося
    14 липня, 2021 у 20:30

    Отримано сповіщення від оператора відправки SMS про проведення планових робіт з обслуговування власної інфраструктури з 14.07.2021 23:00 по 15.07.2021 02:00.
    Протягом вказаного діапазону часу можливі короткочасні помилки підсистеми відправки SMS.

  • Під час виконання
    14 липня, 2021 у 20:01
    Під час виконання
    14 липня, 2021 у 20:01

    Проводяться технічні роботи.
    Можливі короткочасні помилки підсистеми відправки SMS.

Затримки в роботі ЦБД
  • Вирішено
    Вирішено

    Підтверджено виправлення проблеми з кластером сховища підписного контенту.
    МІС підтверджують відсутність затримок.

  • Моніторинг
    Моніторинг

    Відновлення кластеру сховища підписного контенту завершено.

  • Визначено
    Визначено

    Підтверджено джерело проблем - сховище підписного контенту. Внаслідок програмного збою 1 із 3 реплік втратила зв'язок з мережею. Система працює з затримками, оскільки паралельно відновлюється цілістність кластеру. Очікуваний час до завершення відновлення: 40 хвилин.

  • Вивчається
    Вивчається

    Джерело повідомлення про проблему: запит в jira від МІС, отримання сповіщення від системи моніторингу.
    Попередньо встановлена причина проблем: затримки в роботі системи зберігання підписного контенту
    Очікувана тривалість робіт: до 90 хвилин.

черв. 2021

Pеліз 8.21 на середовище Prod
  • Завершено
    29 червня, 2021 у 23:25
    Завершено
    29 червня, 2021 у 23:25

    Реліз на середовище Prod закінчено. Середовище в роботі.

  • Під час виконання
    29 червня, 2021 у 18:30
    Під час виконання
    29 червня, 2021 у 18:30

    Зупиняємо трафік на середовище Prod

  • Оновлювати
    29 червня, 2021 у 18:30
    Ще не почалося
    29 червня, 2021 у 18:30

    Шановні колеги, час початку встановлення релізу зміщено на 1.5 години - на 21:30.

  • Ще не почалося
    29 червня, 2021 у 17:00
    Ще не почалося
    29 червня, 2021 у 17:00

    Pеліз 8.21 на середовище Prod 29.06.2021 о 20:00.

    Це попередньо вказаний час. Слідкуйте за оновленнями - дата може бути перенесена.
    Очікувана тривалість робіт: від 180 хвилин.
    Протягом встановлення релізу середовище Prod буде недоступне.
    Release notes:
    https://e-health-ua.atlassian.net/wiki/spaces/EH/pages/5099520007/29.06.2021+Prod+8.21.1+Release+Care+Plan+Insulin+CSI+may

Кілька кластерів серверів не працюють в сховищі підписного контенту
  • Вирішено
    Вирішено

    Проблема вирішена.
    Отримано підтвердження від системи моніторингу
    Підсумки події: Один з кластерів відновлений

  • Моніторинг
    Моніторинг

    Тип рішення: постійне
    Опис рішення: Скасування відновлення одного з непрацюючих кластерів серверів. Перезавантаження даногно кластеру і початок відновлення на іншому
    Опис наслідків: Короткостроково повільна робота системи

  • Визначено
    Визначено

    Опис проблеми: Недоступність кількох кластерів серверів, але за допомогою дублюючих систем, вдалось уникнути проблем для користувачів.
    Орієнтовний час вирішення: 9 годин

  • Вивчається
    Вивчається

    Джерело повідомлення про проблему: отримання сповіщення від системи моніторингу
    Попередньо встановлена причина проблем: Уточнюється

Проблеми з відправкою SMS
  • Вирішено
    Вирішено

    Отримання підтвердження виправлення від МІС.
    Черги на компоненті медичних подій зникли.

  • Моніторинг
    Моніторинг

    Функціонал відправки SMS відмовлено.

  • Визначено
    Визначено

    Служба підтримки оператора підтвердила проблему.
    Очікуваний час вирішення: 30 хвилин.

  • Вивчається
    Вивчається

    Джерело повідомлення про проблему: отримання сповіщення від системи моніторингу)
    Звернулися до служби підтримки оператора.

Дуже повільні операції зі сховищем підписного контенту
  • Вирішено
    Вирішено

    Проблема вирішена.
    Отримано підтвердження від системи моніторингу
    Підсумки події: Після відключення повільного вузла, операції зі сховищем підписного контенту працюють стабільно.

  • Моніторинг
    Моніторинг

    Тип рішення: тимчасове
    Опис рішення: Відключення повільного вузла

  • Визначено
    Визначено

    Опис проблеми: Високий рівень навантаження у проблемному вузлі
    Орієнтовний час вирішення: 2 години

  • Вивчається
    Вивчається

    Джерело повідомлення про проблему: отримання сповіщення від системи моніторингу
    Попередньо встановлена причина проблем: Уточнюється

Дуже повільні операції зі сховищем підписного контенту
  • Вирішено
    Вирішено

    Проблема вирішена.
    Отримано підтвердження від системи моніторингу
    Підсумки події: Після перевключення запису в кеш кластеру серверу, операції зі сховищем підписного контенту працюють стабільно.

  • Моніторинг
    Моніторинг

    Тип рішення: тимчасове
    Опис рішення: Відключення запису в кеш кластеру серверу та через короткий час його включення

  • Визначено
    Визначено

    Опис проблеми: Високий рівень кешування в розділі кластеру серверу
    Орієнтовний час вирішення: 1 година

  • Вивчається
    Вивчається

    Джерело повідомлення про проблему: отримання сповіщення від системи моніторингу
    Попередньо встановлена причина проблем: Уточнюється

черв. 2021 до серп. 2021

Наступна