Apache NiFi та виробниче мислення: Чому даним потрібне відстеження
Чому потоки даних в Apache NiFi нагадують складальний конвеєр. Відстежуваність даних (traceability), Lean, Back Pressure та пастка моноліту в інтеграції.
Ділюся практичним досвідом, архітектурними рішеннями та думками про DevOps, автоматизацію та підтримку інфраструктури.
Чому потоки даних в Apache NiFi нагадують складальний конвеєр. Відстежуваність даних (traceability), Lean, Back Pressure та пастка моноліту в інтеграції.
Як досвід управління конвеєром допомагає будувати надійні IT-системи. Застосування принципів Lean, PDCA та теорії обмежень у DevOps та інфраструктурі.
Практичний кейс автоматизації логістики: як ми інтегрували Google OR-Tools із GLPI для автоматичного планування та оптимізації маршрутів водіїв.
Як відновлення реальної IP-адреси клієнта повернуло ACL, ліміти запитів, логування та чому не кожен інструмент безпеки можна виправити однаково.
Практичні причини переходу від класичного cron до таймерів systemd для підвищення надійності, безпеки, керованості та спостережуваності завдань.
Практичний досвід масштабування відправки транзакційної пошти в GLPI за допомогою AWS Simple Email Service (SES) замість використання корпоративного SMTP.
Практичний досвід використання Proxmox Backup Client для файлових бекапів Linux-серверів без ускладнення інфраструктури Borg чи Restic.
Як зберегти прив'язку сесій (session affinity) між кількома різними портами сервісів за допомогою Shared Stick Tables у HAProxy.
Практичний досвід спрощення діаграм Apache NiFi та розвантаження оркестрації шляхом винесення бізнес-логіки у FastAPI мікросервіси.
Аналіз того, чому системи спостереження стають складнішими за додатки, і як Grafana Alloy об'єднує логи, метрики та трасування в єдиний керований конвеєр.
Як об'єднати Git-репозиторії, CI/CD конвеєри, реєстр контейнерів та керування секретами в єдину легковагову self-hosted платформу, спростивши обслуговування інфраструктури.