redigo: getting dial tcp: connect: cannot assign requested address about moira HOT 2 CLOSED

Нарыли несколько проблем:

1. Неограниченный пул соединений: решили потестировать, начнем со значения 512 с флагом wait в клиенте редиса.
2. Перерасход соединений из-за ленивого(через defer) их закрытия, а так же слишком активная аллокация (и возвращение) соединений вместо их переиспользования. хотим сделать несколько шагов:
   • где это нужно вызывать методы доступа в Database с уже полученным соединением, так чтобы один вызов методов Database соответствовал одному вызову connector.pool.Get();
   • заменить 3 вызова методов Database в FetchData, каждый из которых берет коннекцию из пула, одним вызовом и брать только одну коннекцию;
   • (со звездочкой) не так активно проверять коннекцию в TestOnBorrow при взятии коннекции из пула.

@Pliner провалидируй, исправь где я не прав.

from moira.

Как итог, сделали чуточку по-другому:

1. В #253 заиспользовали SPOP N, чтобы вынимать сразу пачку триггеров, вместо кучи одиночных SPOP.
2. В #242 выставили минимальный и максимальный размер пула(раньше минимальный размер был 3, а максимальный - не ограничен), пофиксили возможность существования на стеке нескольких открытых соединений из-за закрытия через defer. Так же развели пулы соединений под блокировки и под обычные соединения(раньше был общий пул), так как не хотелось бы, чтобы блокировки конфликтовали с обычными запросами за соединения.

Из-за того, что пул фактически не работал и соединения активно открывались/закрывались, мы натолкнулись на невозможность открытия новых tcp соединений, так как закрытые соединения висели в TIME-WAIT.

from moira.