Привет ребят, подтолкните на мысль, пожалуйста?! Имеется: условно большой слайс ~300 элементов sites

Question

Привет ребят, подтолкните на мысль, пожалуйста?! Имеется: условно большой слайс ~300 элементов sites

:= []string{"google.com", "yandex.ru", ...}
данные в него я достаю из postgres в вечном цикле и юзер моего сервиса может добавлять в него свои данные в любое время.
Есть метод get(site string) который, условно, дергает главную страницу каждого сайт GET запросом.

Есть такой код:
var wg sync.WaitGroup
sites := []string{"google.com", "yandex.ru", ...}
for _, site := range sites {
wg.Add(1)
go func (site string) {
get(site)
wg.Done()
}(site)
}
wg.Wait()
Правильно ли и можно ли вызывать такое кол-во горутин (~300 и будет увеличиваться)?
Главное: есть ли способ, при добавлении элемента в sites, как-то добавить его в итерацию. Подозреваю, что мой код так не сможет, но может есть идеи как это сделать?
Тобиш, если пользователь добавляет новый сайт, он мгновенно берется в работу функцией get(), не дожидаясь конца цикла по уже добавленным сайтам.
Возможно весь мой подход не верный?

#backend #go #programming #russian

0

02.08.2021

13 ответов

4 просмотра

Denis Nesterenko Автор вопроса

Johnny Ipcom🇺🇦
Зависит. Если хотите ограничить - то есть разные в...

Похоже на то, что нужно! Изучу! Спасибо! А нет ли смысла реализовать паттерн Наблюдателя тут? Есть Издатель, в котором слежу за новыми поступлениями в БД, и есть кучка Наблюдателей, в горутинах, которым прилетает сообщение с новым сайтом?

0

02.08.2021

Johnny Ipcom🇺🇦

Denis Nesterenko
Похоже на то, что нужно! Изучу! Спасибо! А нет ли ...

Можно, наверное, но worker pool - это почти оно и есть. Если интересно - беглое гугление нашло вот эту статью, почитайте, ваше это или нет https://medium.com/german-gorelkin/go-observer-bc95f465961b

0

02.08.2021

Denis Nesterenko Автор вопроса

Johnny Ipcom🇺🇦
Можно, наверное, но worker pool - это почти оно и...

Принял! Большое спасибо за ответ! :)

0

02.08.2021

Roman Timofeev

Denis Nesterenko
Похоже на то, что нужно! Изучу! Спасибо! А нет ли ...

г-ди, зачем вам эти паттерны?

0

02.08.2021