Создать программу-парсер
стабильного парсера по сайту TRANSFERMARKT.COM .
Данные парсера должны быть представлены в виде кода ( в формате JSON , XLS, CSV) для дальнейшей его интеграции в
«базу» с последующей переработкой кода и вывода на закрытый сайт.
Основная задача:
- безошибочная передача данных,
- стабильность под нагрузкой,
- альтернативный автоматический переход на алгоритм в случае защиты от ddos.
- автоматическое добавление всех игроков в базу по списку игроков
- создание самописного парсера
Перед выполнением задания необходимо провести анализ данных сайтов и дать резюме:
1. Возможность парсинга
2. Ограничения/Защита
3. Потенциал работоспособности под максимальной нагрузкой
4. Варианты альтернативных алгоритмов
5. Язык программирования парсера