Netpulse_SasS/db/profiles
byrsapty ed8fc831bf Дві сесії роботи: 0058–0068, розгортання однією командою, тести
Один коміт, а не десяток тематичних, свідомо: теми переплетені в
спільних файлах (store.go, docker-compose.yml, deploy/README.md), і
розділити їх можна було б лише індексуванням шматків. Коміти, які не
збираються, гірші за один великий — тим паче що це рівно той стан, який
перевірявся разом.

ЩО ПРАЦЮЄ НА СТЕНДІ Й ПЕРЕВІРЕНО ТАМ

  0058  подієві алерти: syslog, ncm, compliance спрацьовують у мить
        події; правило з нереалізованим джерелом більше не зберігається
        мовчки
  0059  snmp.walk і прототипи шаблонів — таблиці з динамічним індексом
        описуються шаблоном, а не Go
  0060  відкат конфігу: план як різниця, маскування паролів із підписом
        плану, обов'язковий контрольний збір, verifying при обриві
  0061  кнопки Telegram: довге опитування, авторизація не з callback_data
  0062  аудит і архів хостів; тест на AST, що падає на ключі без назви
  0063  RLS: три ролі, окремий пул для фонових тактів
  0064  строки зберігання даних і сторінка сховища
  0065  приймач SNMP-трапів; перевірено справжніми пакетами по дроту,
        переклад v1→v2 за RFC 3584 дає правильний OID
  0066  ескалації сповіщень
  0067  алерт про вичерпання диска
  0068  поля заливки конфігу переїхали в каталог профілів

Плюс: 137 тестів вебу з нуля (їх не було взагалі), одинадцять справжніх
вад, знайдених ними й виправлених, і виправлення двох інтеграційних
тестів grpcapi, які мовчки пропускались півтора року.

ЩО ЩЕ НЕ ЗАПУСКАЛОСЬ

  netpulse            установник: одна команда замість 18 змінних і
                      593 рядків інструкції
  RLS з першого запуску  нова інсталяція під політиками одразу;
                      RLS-EXISTING-INSTALL.md лишається тільки для
                      старих інсталяцій
  .forgejo + CI       раннер не зареєстрований

Ці три перевірені компіляцією й міркуванням, але не виконанням.

ГОЛОВНИЙ ВИСНОВОК ДВОХ СЕСІЙ

Зелена перевірка доводить рівно те, що вона перевіряє. Тест ізоляції RLS
був правильний і зелений — і пропустив зламаний вхід, бо перевіряв «чи
не видно чужого», коли зламалось «чи видно своє». Інтеграційні тести
grpcapi були зелені, бо не виконувались. Схема, довідник і протокол
описували те, чого в коді не існувало, і виглядало це як готове.

Тому в кожному завданні цих сесій стояла вимога назвати НЕПОКРИТЕ, а
чотири задачі закінчились не можливістю, а відмовою: правило з
нереалізованим джерелом не зберігається, профіль без команд заливки
каже про це замість мовчазної кнопки, міграція RLS валить сама себе на
таблиці без політики, тест словника аудиту падає на ключі без назви.

Подробиці — HISTORY.md, розділи за 26 і 27 серпня.
2026-08-27 17:32:49 +03:00
..
apply.generated.sql Дві сесії роботи: 0058–0068, розгортання однією командою, тести 2026-08-27 17:32:49 +03:00
build.py Дві сесії роботи: 0058–0068, розгортання однією командою, тести 2026-08-27 17:32:49 +03:00
catalog.json Дві сесії роботи: 0058–0068, розгортання однією командою, тести 2026-08-27 17:32:49 +03:00
README.md Дві сесії роботи: 0058–0068, розгортання однією командою, тести 2026-08-27 17:32:49 +03:00

Каталог команд роботи з конфігом

catalog.json — джерело істини про те, як зняти конфіг із кожної підтримуваної платформи і як залити його назад. 148 платформ, 67 вендорів.

SQL із каталогу породжується, а не правиться руками: два описи одного й того самого розійшлися б із першою ж правкою, і невідомо було б, який справжній.

python build.py            # перезібрати згенероване
python build.py --check    # звірити, чи воно актуальне

Генератор пише два файли, і це не примха:

файл що несе
server/migrations/0014_ncm_profiles.sql самі профілі: команди збору
apply.generated.sql поля заливки (apply_*) для наявних профілів

apply.generated.sqlне міграція. Колонки apply_* заводить міграція 0060, тобто пізніше за 0014: вставка в 0014 не може згадати колонку, якої на той момент ще немає. До того ж 0014 уже накочена на стендах, а netpulse-migrate звіряє sha256 застосованих файлів і зупиняє накат на розбіжності — зміна тексту 0014 зупинила б оновлення всім. Тому поля заливки їдуть окремо: скопіюй apply.generated.sql у нову міграцію під номером, який призначила людина. Номер генератор не вигадує свідомо — над одним каталогом номерів працюють паралельні гілки.

Будова

{
  "families": {
    "cisco": {
      "pager": "terminal length 0",       // чим вимкнути посторінковий вивід
      "prompt": "[>#]\\s*$",              // за чим ловити кінець виводу
      "enable_required": true,            // чи потрібен привілейований режим
      "scrub": ["^Building configuration"],  // вирізати з diff — шум, що змінюється щоразу
      "redact": ["(password|secret) \\S+"]   // замаскувати перед записом у Git
    }
  },
  "vendor_family": { "bdcom": "cisco" },   // чий CLI успадкував вендор
  "profiles": [
    {
      "key": "cisco-ios",
      "name": "Cisco IOS",
      "vendor": "cisco",
      "family": "cisco",
      "config": "show running-config",      // головна команда
      "startup": "show startup-config",     // необовʼязково
      "prepare": ["undo terminal monitor"], // необовʼязково: підготовка консолі
      "strip_lines": 3,                     // скільки службових рядків відкинути
      "alternatives": ["show config current_config"],  // для інших моделей родини
      "apply": {                            // як ЗАЛИВАТИ конфіг; без блоку — заливка вимкнена
        "comment": ["чому саме так"],       // їде коментарем над UPDATE
        "enter": ["configure terminal"],    // чим увійти в режим конфігурації
        "exit": ["end"],                    // чим із нього вийти
        "commit": "write memory",           // чим зберегти, щоб пережило перезавантаження
        "negate": "no ",                    // префікс заперечення рядка; null — родина не вміє
        "block_exit": "exit",               // чим вийти з вкладеного контексту
        "supported": true,                  // чи є заливка взагалі
        "note": "…"                         // що сказати людині, коли заливки немає
      }
    }
  ],
  "apply_external": {                        // заливка для профілів, заведених
    "zte-zxan": { "…": "…" }                 // не каталогом, а руками (0028, 0034/0043)
  }
}

Як додати платформу

  1. Додай запис у profiles. Мінімум — key, name, vendor, family, config.
  2. Якщо CLI не схожий на жодну наявну родину — заведи нову у families.
  3. Якщо заливка на цій платформі перевірена — додай блок apply. Не перевірена — не додавай: див. «Про заливку».
  4. python build.py.
  5. Перенеси нові рядки у нову міграцію. 0014 чіпати не можна: вона вже накочена, а runner звіряє sha256 і зупиниться на зміненому файлі. Так уже робили для zte-zxan (0028) і dlink-me (0034, 0043). INSERT іде з ON CONFLICT DO NOTHING, UPDATE задає всі поля явно — повторний накат безпечний в обох випадках.

Про заливку

Блок apply описує, як віддати конфіг пристрою назад: увійти в режим конфігурації, прибрати зайвий рядок, зберегти. Живе він у каталозі поруч із командами збору, а не в разовій міграції, з однієї причини: профіль, доданий без полів заливки, виглядав би робочим, а відкат для нього мовчки не спрацював би — і побачили б це рівно тоді, коли відкат знадобився.

Заливка задається профілем, а не родиною. Родина описує поведінку консолі (пейджер, запрошення), і збігається вона не з синтаксисом конфігурації: zte-zxr10 стоїть у родині huawei через запрошення, а конфігурується як Cisco. Успадкувати заливку від родини означало б відправити на пристрій чужі команди.

Профіль без блоку apply лишається без заливки, і це нормально. apply_supported = false — чесна відповідь «не вміємо», з якої інтерфейс робить вимкнену кнопку з поясненням. Вигадана команда гірша за відсутню: вона пише на живе залізо. Тому коли заливки немає з розібраної причини — заповнюй note: порожнє поле перетворює свідоме рішення на схоже на недогляд (див. mikrotik-routeros, juniper-junos).

Родини

Родина описує поведінку консолі, а не вендора: bdcom, arista, brocade та ще з десяток говорять діалектом Cisco, h3c і 3com — діалектом Huawei. Тримати це один раз на родину, а не копіювати в кожен профіль, — різниця між правкою в одному місці й правкою в сорока.

Родина generic — запасний варіант: промпт [>#]\s*$, без вимкнення пейджера, з обережним маскуванням паролів і community.

Про промпти

prompt і pager задані за родиною й перевіряються на живому залізі. Одна родина покриває десятки платформ, і дрібні відхилення трапляються: прошивка може давати інший символ запрошення або не розуміти команду вимкнення пейджера. Команди збору конфігу натомість специфічні для платформи й узяті точно.

Чому не в БД

Каталог — код, а не дані клієнта: він однаковий для всіх інсталяцій, має переглядатись у code review і їхати разом із релізом. Тенант може завести власний профіль (ncm.profiles із заповненим tenant_id) — вбудовані при цьому лишаються недоторканими.