можно запустить в кубере, чтобы ему можно было передать url и оно скачало страницу в файл, чтобы потом эту страницу можно было положить скажем в redis?
Рассматриваю V8, Selenium и Selenoid (но Selenoid в кубе не рекомендуется в т.к. он завязан на докере, вместо него у них есть платный Moon).
На рынке есть очень дорогое решение, от BASH LTD response=`curl example.com` redis-cli set response "${response}" С тебя 2000$
Это не удовлетворяет условиям задачи
Попробуйте так google.com скачать или что-то с более динамическим содержанием.
Тогда вам нужно былее дорогое решение от конкурентов!
А что там не скачается?
Контент который генерируется через js, очевидно же
А вы скачайте, отключите интернет и посмотрите тоже самое откроется? :)
Обсуждают сегодня