Netflix трансформира оперативните си данни в граф на знанието за интелигентна AI наблюдаемост
Източник: InfoQ / Netflix Technology Blog
В мащабна публикация за своя архитектурен блог Netflix разкри детайли за новата си платформа за оперативна наблюдаемост, която трансформира петабайти телеметрични данни и зависимости между хиляди микросървиси в единен динамичен граф на знанието [1]. Системата захранва автономни софтуерни агенти, способни да изолират корена на системни сривове (root cause analysis) за броени секунди.
Графова семантика срещу фрагментирани времеви редове
Традиционните DevOps инструменти разчитат на плоски метрики и фрагментирани времеви редове, което прави диагностиката в сложни микросервизни мрежи изключително трудна при масови каскадни аварии. Архитектурата на Netflix моделира всеки сървър, база данни, API маршрут и мрежов комутатор като възли в семантичен граф, където ребрата отразяват реалните потоци от данни и зависимости в реално време.
Когато дадена услуга започне да връща грешки 500, агентът за инциденти не чете милиони редове логове, а извършва графово обхождане, изолирайки веднага първоизточника на повредата.
Интеграция с генеративни агенти за автоматизирано възстановяване
Графът служи като структуриран контекст за специализирани езикови модели. Агентите генерират персонализирани препоръки за дежурните инженери, включително точните скриптове за пренасочване на трафика или рестартиране на засегнатите клъстери.
През последните три месеца системата е намалила времето за локализиране на критични проблеми в глобалната мрежа за доставка на съдържание (CDN) с близо 80%.
Инфографика: Аналитичен преглед на Svetni.me
Бъдещето на автономната инфраструктурна експлоатация (AIOps)
Иновацията на Netflix демонстрира ключовата роля на структурираното представяне на данни в ерата на изкуствения интелект. Генеративните модели са мощни генератори на текст, но без солидна онтологична база и прецизни графови карти на инфраструктурата, техните решения в критични моменти рискуват да се превърнат в халюцинации.
Комбинацията от динамични графи на знанието и разсъждаващи агенти ще се превърне в златен стандарт за всички глобални облачни доставчици. Това поставя началото на истински самоуправляващи се облачни платформи, способни на автономен имунен отговор срещу системни повреди.