Go-сервис медленно съедает память — как найти утечку горутин или памяти через pprof?

ЗнаниеSeniorЧасто

Проверила команда СопроводОбновлено

Короткий ответ

Сначала отделите утечку от нормального роста: при ровной нагрузке живая куча после сборок или число горутин растет без остановки. Подключите net/http/pprof и снимите профили дважды с интервалом. Профиль goroutine покажет тысячи горутин с одинаковым стеком, а goroutineleak в Go 1.27 — те, что не проснутся никогда. Профиль heap в режиме inuse_space со сравнением через -base покажет, где копятся живые объекты.

Почему этот вопрос задают

Утечку в Go-сервисе выдает график памяти, который ползет вверх, и перезапуски по OOM. От Senior ждут, что он найдет ее по профилям за час, без догадок.

Как рассуждать

  1. Отделите утечку от нормы: при ровной нагрузке растут живая куча после сборок или число горутин
  2. Подключите net/http/pprof на служебном порту и снимите профили goroutine и heap дважды
  3. Сравните снимки через go tool pprof -base и найдите функцию, у которой вырос inuse_space
  4. Проверьте горутины по стеку: тысячи одинаковых на chan receive или select означают утечку
  5. Подтвердите исправление теми же метриками после выкладки

Ответ с примером

У сервиса вебинаров онлайн-школы память растет на 200 МБ в сутки. Первым делом проверьте, не копятся ли горутины: каждая держит свой стек и все, на что ссылается. В примере connect запускает горутину, которая ждет сообщение из чата. Зритель ушел, канал никто не закрыл, и горутина ждет вечно. После 100 подключений горутин уже 101, и runtime.GC() их не убирает: заблокированная горутина для сборщика живая. В /debug/pprof/goroutine?debug=1 они видны одной группой 100 @ … со стеком main.connect.func1. В Go 1.27 есть и профиль goroutineleak: перед снимком он запускает сборку мусора с поиском утечек и оставляет только горутины, которые ждут канал, до которого больше никто не дотянется. Здесь он выдаст те же 100 горутин.

Если горутин мало, а куча растет, снимите профиль heap дважды с интервалом в час и сравните через go tool pprof -base. Наверху окажется функция, которая копит объекты, чаще всего кэш или map без вытеснения.

Go
func connect() {
	chat := make(chan string)
	go func() { fmt.Println(<-chat) }()
}
func main() {
	before := runtime.NumGoroutine()
	for range 100 {
		connect()
	}
	runtime.GC()
	fmt.Println(before, runtime.NumGoroutine(), pprof.Lookup("goroutine").Count())
}
Вывод
1 101 101

Как ответить сильнее

Что добавит опытный кандидат

Что спросят следом

Доступно по подписке

Приемы опытных и готовые ответы

Частые ошибки

  • «В Go есть сборщик мусора, утечек памяти там не бывает»

    Объясните, что сборщик убирает только недостижимое. Заблокированная горутина, растущий кэш или глобальная map остаются достижимыми и держат память

  • «Открою профиль heap в режиме alloc_space и найду утечку»

    Уточните, что alloc_space считает все выделения с запуска программы. Для утечки смотрите inuse_space: живые объекты и их прирост между снимками

  • «Утечка горутин тоже видна в профиле памяти»

    Скажите, что у горутин свой профиль goroutine: их стеки в heap не попадают. Зато число горутин растет на графике раньше, чем память

  • «Сниму один профиль и посмотрю, кто больше всех занимает»

    Покажите, что один снимок покажет крупных, но законных владельцев памяти, например кэш. Утечку выдает прирост между двумя снимками

Сигналы для интервьюера

Сильный ответ

Описывает порядок поиска целиком: метрики, два снимка профиля, сравнение через -base, проверка исправления по тем же метрикам

Тревожный сигнал

Открывает профиль через go tool pprof, но теряется в выводе top и не может сказать, какая функция держит память

Красный флаг

Предлагает поднять лимит памяти пода и перезапускать сервис по расписанию, пока утечка «не найдется сама»

Как еще могут спросить

  • Как найти утечку памяти в Go-приложении?
  • Как обнаружить утечку горутин в Go?
  • Как пользоваться pprof для анализа памяти?
  • Почему память Go-сервиса растет, хотя есть сборщик мусора?

Похожие вопросы

ЗнаниеMiddleЧасто

Как работает сборщик мусора в Go и почему ему не нужны поколения?

Сборщик мусора в Go трассирующий, конкурентный и не перемещает объекты. От корней, то есть стеков горутин и глобальных переменных, он помечает все достижимые объекты параллельно с работой программы и освобождает остальные. Барьер записи сообщает ему о ссылках, которые код меняет во время разметки. Поколения не нужны: короткоживущие объекты в Go обычно живут на стеке благодаря escape analysis.

  • сборщик мусора
  • память
241
ЗнаниеSeniorИногда

Что настраивают GOGC и GOMEMLIMIT и как не дать Go-сервису упасть по OOM в контейнере с лимитом памяти?

GOGC задает, насколько куча может вырасти сверх живых данных до следующей сборки: при 100 цель кучи примерно вдвое больше живой. GOMEMLIMIT с Go 1.19 — мягкий лимит всей памяти рантайма: когда память к нему подходит, сборщик запускается чаще. В контейнере ставьте GOMEMLIMIT на 5–10% ниже лимита памяти, иначе всплеск живых данных удвоит пик и вызовет OOM.

  • сборщик мусора
  • контейнеры
192
ЗнаниеMiddleЧасто

Когда переменная в Go уходит в кучу и как это проверить через escape analysis?

Где жить переменной, решает компилятор, синтаксис new и & этого не определяет. Escape analysis оставляет значение на стеке, если доказал, что оно не переживет функцию. В кучу оно уходит, когда указатель сохраняют за пределами вызова: в глобальную переменную, канал, замыкание горутины или интерфейс, который переживет функцию. Решения показывает go build -gcflags=-m, цену — счетчик аллокаций.

  • память
  • escape analysis
225
ЗнаниеMiddleЧасто

Зачем в Go нужен context и как отмена доходит до всех горутин запроса?

context.Context переносит через границы функций отмену, дедлайн и значения запроса. Производные контексты образуют дерево: cancel() родителя закрывает канал Done() у него и у всех потомков, обратно отмена не идет. Остановить горутину контекст не может: она сама слушает ctx.Done() или передает ctx в вызовы базы и сети. cancel вызывайте всегда, обычно через defer.

  • context
  • горутины
288

Частые вопросы по теме

Короткие ответы на частые вопросы по этой теме.

top — функции с наибольшим потреблением, list с именем функции — построчно, флаг -http — граф и flame graph в браузере. Добавьте -base для сравнения двух снимков. Этого хватит, чтобы показать, что вы работали с профилями руками.

Повторите поиск на учебном сервисе: запустите горутину, которая ждет канал без закрытия, нагрузите обработчик и найдите ее в /debug/pprof/goroutine. Расскажите этот опыт честно, с цифрами до и после. Интервьюер увидит, что метод вы знаете на практике.

Самая частая утечка — горутина ждет канал или ответ, когда вызывающий уже ушел. Передавайте ей ctx и добавляйте ветку case <-ctx.Done(): return в каждый select, тогда отмена запроса завершит и ее.

Общие вопросы на интервью

Общий вопросС опытомЧасто

Почему вы хотите работать у нас?

Назовите две-три причины, которые связывают вас именно с этой компанией: продукт, задачи, масштаб, команда. Каждую подкрепите фактом, который нашли сами: новость, проект, текст вакансии, свой опыт клиента. Потом покажите, что принесете со своей стороны. Слова о стабильности и известном бренде подходят любой компании, поэтому на них ответ не держится.

  • мотивация
  • о компании
290
Общий вопросБез опытаЧасто

Какие у вас сильные стороны?

Хватит двух-трех сильных сторон, которые нужны на этой работе, если к каждой есть пример: что сделали и какой был результат. Берите качества из текста вакансии, а не из списка «ответственный, коммуникабельный». Без опыта примеры ищите в учебе, практике и подработке. Говорите спокойно, без лишней скромности и без хвастовства.

  • сильные стороны
  • без опыта
276
Общий вопросБез опытаЧасто

Кем вы видите себя через 5 лет?

Расскажите, какие задачи хотите решать через несколько лет и чему для этого научитесь. Свяжите план с тем, что дает эта компания, и покажите первый шаг, который уже сделали. Точную должность называть не обязательно. Важнее, чтобы план был реальным и вел через эту работу, а не мимо нее.

  • мотивация
  • карьерные планы
289
ИсторияС опытомЧасто

Расскажите о конфликте с коллегой: из-за чего он возник и как вы его решили?

Расскажите один реальный конфликт по рабочему вопросу: из-за чего разошлись, чего хотела каждая сторона и как вы договорились. Говорите спокойно, без оценок коллеги. Покажите, что вы искали решение, где-то уступили и сохранили рабочие отношения. Закончите результатом и тем, что теперь делаете, чтобы похожий спор не повторился.

  • конфликты
  • работа в команде
252
ИсторияС опытомЧасто

Каким профессиональным достижением вы гордитесь больше всего?

Назовите одно достижение, близкое к задачам новой работы, и расскажите его как историю: какая была проблема, что сделали лично вы и что изменилось в цифрах. Сильнее всего звучит результат, который держится и после вас: новый порядок работы, правило, схема. Если результат общий, прямо скажите, какая часть в нем ваша.

  • достижения
  • результат в цифрах
276
Общий вопросБез опытаЧасто

Опыта работы еще нет, а интервьюер просит рассказать о себе: что вы скажете?

Начните с того, кто вы сейчас и на какую работу пришли. Вместо стажа расскажите об учебе, практике и подработке, которые похожи на задачи вакансии, и назовите один результат с цифрой. Закончите тем, почему хотите начать карьеру именно здесь. Уложитесь в одну-две минуты и не пересказывайте резюме по порядку.

  • о себе
  • без опыта
244

Вопросы руководителю на интервью

ИсторияРуководительЧасто

Как вы делегируете задачи: что отдаете команде, а что оставляете себе?

Назовите свое правило: что вы отдаете команде и что оставляете себе, и покажите его на одной задаче. Расскажите, кому и почему передали, какие полномочия и рамки дали, как проверяли без мелкого контроля. Закончите честным итогом: что получилось хуже или медленнее, чем у вас, и что вы выиграли.

  • делегирование
  • команда
255
КейсРуководительЧасто

Два сотрудника вашей команды месяц не разговаривают друг с другом, и общий отчет уже сорвал срок — что сделаете?

Поговорите сначала с каждым по отдельности: что случилось, с чего началось и что мешает работать. Потом соберите обоих вместе и обсуждайте работу: кто за какие данные и шаги отвечает. За такой ссорой часто стоит размытая ответственность. Запишите договоренности, назовите новый срок для сорванного отчета и через пару недель проверьте, что все работает.

  • конфликт
  • ответственность
242
ИсторияРуководительЧасто

Расскажите о сотруднике, которого вы вырастили: каким он пришел и чего добился?

Возьмите одного человека и покажите путь: каким он пришел, какие задачи вы ему давали по нарастающей и чем помогали, кем он стал и за какой срок. Назовите цифру роста: новая должность, своя зона, люди в подчинении. Скажите честно, где он вырос сам, а где сработали ваши решения.

  • развитие сотрудников
  • наставничество
303
ИсторияРуководительЧасто

Расскажите о цели, которую ваша команда не выполнила: когда вы это поняли и что сделали?

Назовите цель с цифрой и честный итог. Главное в ответе — момент, когда вы поняли, что цель срывается, и по какой цифре это увидели. Дальше расскажите, кому и когда сказали, что пересобрали, чтобы спасти главное, и какой один вывод сделали для следующего плана.

  • цели
  • провал
241
Общий вопросРуководительЧасто

Как вы измеряете результат своей команды?

Назовите два-три показателя, которые отражают то, ради чего существует ваша команда, и их текущие цифры. Добавьте показатель качества, который не дает гнаться за одним числом. Скажите, как часто смотрите на цифры, кто их видит и какое решение вы приняли по ним в последний раз.

  • показатели
  • цели
216
ИсторияРуководительЧасто

Расскажите, как вы разложили цель компании на задачи для своей команды

Возьмите одну цель компании с цифрой и сроком и покажите, как вы ее разбили: на какие части, по какому признаку, какие личные цели получил каждый сотрудник. Расскажите, как следили за ходом и что меняли по дороге. Закончите итогом план-факт честно, даже если цель выполнена не целиком.

  • цели
  • планирование
227