Петабайты логов, метрик и трейсов — и ни одной потерянной записи ↖️ Представьте систему, которая каждую секунду процессит 3 миллиона логов, 450 Мб метрик и 2 миллиона спанов. Столько данных проходит через Sage — нашу observability-платформу, на которой держится стабильность работы всех наших сервисов. С такими объемами данных во время эксплуатации мы встретились с множеством проблем, которые решали итеративно. И только оглянувшись, поняли, что все наши «изобретения» — это давно известные паттерны. 👉🏻 В карточках описали некоторые проблемы, с которыми мы столкнулись, и их решения. А если хотите узнать, какая архитектура помогает справляться с такой нагрузкой и что еще мы придумали для надежной работы пайплайнов, — читайте статью на Хабре.