Популярная платформа разработки программного обеспечения GitHub опубликовала периодический отчет о доступности и надежности сервисов за октябрь 2026 года, осветив инженерные достижения и инциденты производительности, с которыми столкнулась платформа в этот период. В отчете отмечается, что в октябре произошло восемь инцидентов, приведших к снижению производительности некоторых сервисов, в то время как платформа продолжает переносить свои нагрузки на инфраструктуру Azure.
По состоянию на 9 ноября в регионе Azure Central US работали 140 производственных сервисов из 151 и 32 основные базы данных MySQL из 50. Новая инфраструктура обслуживала 63% чтений мигрировавших сервисов, 66% чтений монолитной системы и 52% чтений системы Git. Компания также удвоила вычислительную мощность в девяти кластерах Kubernetes в том же регионе, причем трафик мигрировавших сервисов вырос на 82% с марта прошлого года.
Основные операционные инциденты октября
Отчет содержит подробности восьми ключевых инцидентов, различавшихся по своим причинам и степени влияния на пользователей и разработчиков:
- Сбои планировщика GitHub Actions: 5 октября частичный сбой сети у облачного провайдера привел к потере соединения с базами данных, что вызвало скопление запросов, исчерпание кэша и задержку выполнения задач на несколько часов.
- Нагрузка от миграций организаций: 6 октября массивный приток операций миграции через GitHub Enterprise Importer привел к отправке огромных запросов, истощивших пул соединений общей базы данных, что вызвало общее замедление и временную остановку миграций.
- Сбои записи в базы данных: 7 октября произошли два идентичных инцидента из-за замены машин маршрутизации баз данных на новые машины, содержавшие устаревшие записи, что направило операции записи на выведенные из эксплуатации серверы.
- Сетевые проблемы, затронувшие логи: 19 октября одновременные повторные попытки подключения от службы хранения логов привели к насыщению сетевых соединений, в то время как нагрузка на память в платформе потоковой передачи событий вызвала задержки в журналах аудита 21-го числа.
- Ошибки аутентификации умных моделей: 28 октября истечение срока действия авторизации учетных данных у внешнего провайдера ИИ-моделей привело к сбою примерно 10% запросов моделей GPT в помощнике Copilot.
- Исчерпание пула соединений с базами данных: 30 октября пул соединений с базами данных, используемый сервисами платформы, достиг своей максимальной емкости из-за обновлений, удерживавших соединения дольше обычного, что временно нарушило операции слияния через SSH и Git LFS.
Что меняется на практике и почему этот отчет важен?
Отчет демонстрирует растущую прозрачность платформы в документировании ее сбоев и инженерных исправлений. Несмотря на значительное расширение и увеличение емкости в облаке Azure, которые помогли справиться с ростом использования, эти обновления сопровождались сложными проблемами маршрутизации, сетевого взаимодействия и управления кэшем. GitHub подтверждает, что ее приоритетами остаются доступность в первую очередь, затем емкость и в последнюю очередь новые функции, при этом продолжается работа по расширению инфраструктуры на новые регионы для повышения отказоустойчивости и регионального восстановления.