Парсер сайта Avit.ru
1) У парсера должна быть многопоточность. Примерная скорость должна быть 6-8к объявлений в час. (Ротационные прокси на 40 потоков предоставлю)
2) У парсера должна быть очередь на использование. (Так как использовать этот парсер буду я и мой товарищ)
3) У парсера должен быть фильтр а именно - Когда запускаешь парсер /start он просит прислать ссылку на парсинг, мы присылаем, и следующим вопросом должен быть вопрос "Сколько активных объявлений должно быть у продавца в профиле", и тут мы указываем например 1, и тогда будут парсится объявления только с 1 активным объявлением в профиле, и следующий вопрос парсера будет - "Сколько неактивных ( Завершенных) объявлений парсить" тут тоже мы вписываем по желанию.
4) Парсер должен собирать только уникальные номера телефонов, что бы они больше не повторялись. То есть начал парсинг ---> пошел сбор уникальных объявлений во время САМОГО пасринга, и должны учитыватся результаты прошлого парсинга. Но так как я писал выше, что этот парсер я буду использовать с товарищем, нужно сделать так что бы у каждого была своя база спаршенных номеров.
5) Парсер должен выдавать результат в двух форматах, в exsel и vcf (формат контактов, что бы сразу импортировать в контакты телефона, и что бы в одном контакте была следующая информация: Имя, ссылка на объявление, название, и цена.)
Выдача в ексель: Номер телефона, ссылка на объявление, имя, название объявления, цена, и сколько у пользователя активных и неактивных объявлений в профиле.