Парсер сайта

1-й этап:<br>оценить защиту сайта от парсинга:<br><a href="http://www.blocket.se/">www.blocket.se</a><br><br><span><br>2-й этап:<br>Описание:<br><br> Я ищу опытного разработчика, который поможет мне создать собственную поисковую систему, которая сможет выполнять поиск на веб-сайте в режиме реального времени по 100 различным типам автомобилей. Цель — автоматизировать процесс поиска, собрать соответствующие данные и представить их в удобном для пользователя формате.<br><br> <br><br> Объем проекта:<br><br> <br><br> Автоматический поиск:<br>Выполняйте поиск в Blocket каждую минуту по 100 предопределенным типам автомобилей.<br><br> Включите такие фильтры, как марка, модель, год, ценовой диапазон и местоположение.<br><br> Сбор и хранение данных:<br>Сохраняйте результаты поиска в структурированной базе данных (например, MySQL, PostgreSQL или MongoDB).<br>Обеспечьте доступность данных для будущего анализа и составления отчетов.<br>Интерфейс (необязательно):<br><br>Создайте простую веб-панель или интерфейс для отображения результатов (необязательно, в зависимости от вашего опыта).<br><br> Обработка прокси и защиты от ботов:<br>Внедрите систему ротации прокси или другие стратегии, чтобы избежать обнаружения и обеспечить бесперебойную работу.<br><br> Планирование:<br>Используйте такие инструменты, как Celery или APScheduler, чтобы автоматизировать процесс поиска с желаемой частотой.<br><br> Требования:<br><br> Подтвержденный опыт парсинга веб-страниц с использованием таких инструментов, как Selenium, BeautifulSoup или Scrapy.<br><br> Знание управления базами данных и обработки данных в режиме реального времени.<br><br> Возможность работы с прокси и реализации мер по борьбе с ботами.<br><br> Знание Python или других подходящих языков программирования.<br><br> Сильные навыки решения проблем и внимание к деталям.<br><br> отлично если есть навыки:<br><br> Опыт работы с интерфейсными фреймворками (например, React, Vue.js или Angular) для создания информационной панели.<br><br> Предыдущий опыт работы с Blocket или аналогичными платформами.<br><br> Результаты:<br><br> Полнофункциональная автоматизированная поисковая система.<br><br> Настройка базы данных со структурированным хранилищем результатов поиска.<br><br> (Необязательно) Веб-интерфейс для отображения и фильтрации данных.<br><br> Бюджет и сроки:<br><br> Укажите ориентировочную стоимость и сроки выполнения.<br><br> Дополнительные примечания:<br><br> Прежде чем продолжить, убедитесь, что решение соответствует условиям использования и политике конфиденциальности Blocket. Дайте мне знать, если у вас есть опыт выполнения таких требований.<br><br></span><br><br>