YADRO Go Meetup: sync.Pool, свой mini-k8s, паттерны и сообщения об ошибках

Я работал над приложением, которое испытывало пиковые нагрузки при получении новых данных и не успевало поставить их в централизованную обработку. По привычке начал профилировать в надежде вычислить time-critical участки кода. Но быстро выяснил, что все портил Garbage Collector. Я расскажу:
• Как уменьшить влияние GC на ход выполнения задачи, и какие плюсы и минусы это несет.
• Покажу бенчмарки для разных размеров буферов данных и объясню, когда sync.Pool вам поможет, а когда не следует его использовать.

Мы взяли типичные комплексные задачи в облаке и разбили их на набор атомарных шагов. Для каждого шага сделали свой манифест в helm-стиле, для каждого манифеста написали собственный обработчик. Таким образом мы получили набор маленьких блоков из которых можно составлять большие приложения. И получили все преимущества helm — широкие возможности по шаблонизации и общеизвестный формат.

Мы рассмотрим средства для работы с ошибками в Go, чем они хороши и что делать, если на пути встает сериализация. На примере того, как мы учились сообщать пользователю об ошибках во время выполнения запроса в системе хранения данных, вы узнаете как внедрить свой формат ошибок для общения между сервисами и оформить ее в библиотеку.

Я расскажу о нескольких популярных паттернах, которые помогают использовать мощь горутин грамотно и безопасно. Посмотрим на примеры кода и поговорим о зоне применения этих паттернов.