Ускорение работы парсера за счет нескольких серверов
Задача:
Вариант 1: организовать сеть из серверов на авс или вультре в количестве 3-5 штук. На первом сервере kafka consumer, на двух остальных kafka producer (примеры клиентов consumer, producer есть, kafka, zookeeper, все в докере)
Требуется:
- минимальная задержка передачи по сети от продьюсера к консумеру
- защита от доступа извне - закрытая сеть между тремя серверами
Вариант 2:
реализация на авс или вультре смены ip для каждого http запроса с одного сервера без применения прокси
Нужна консультация и помощь в деплое.