Разместите свой проект бесплатно и начните получать предложения от фрилансеров-исполнителей уже спустя минуты после публикации!
5 000 ₽

Парсинг сайта с вопросами

прием ставок



Спарсить сайт https://clck.ru/JixFL


И сделать скрипт парсинга новых статей (обновления).


Задача1 - спарсить все страницы (по данным да их 200.000)

Для каждой страницы парсим следующие данные:

на примере https://clck.ru/JsDW2


1. Заголовок

2. Текст

3. Ответ (не более одного). Страницы с вопросами без ответов - тоже парсим.

4. Урл источника 

5. id страницы источника https://prnt.sc/pupciv

Все ссылки, видео, картинки внутри текста вопроса/ответа надо удалять. И итоге должны быть чистый текст.


И итоге все данные должны быть в  бд - 

Таблица с вопросами - https://prnt.sc/pupdl7

Табилца с ответами


Задача2 - Так как у них появляются новые статьи - нужно сделать скрипт обновления-добавления новых статей. Запуск скрипта через планировщик. Раз в час например. И парсим новые страницы за сегодняшний день.


Так же надо, если будет необходимо, подключить прокси для парса по апи - https://good-proxies.ru/?c=auth 


По этапам - сначала нужно тестово спарсить 100 записей, проверить и тогда уже все полностью данные.


Жду вопросов по задаче. Цена стоит предварительно.



  1. 10 дней15 000 ₽
    Сергей
    Сергей Курохтин
    490   проверен    1  0

    Добрый день!

    Большой опыт парсинга, в том числе даже защищённых сайтов.
    Готов выполнить, пишите в личку или в Telegram: @SKurokhtin.
    Мой личный сайт: https://rasparsim.ru

    Россия Балашиха | 9 ноября в 20:37 |
  2. 1 день5 000 ₽
    Мария
    Мария Михайлова
    220   

    Занимаюсь парсингом более 5 лет.
    Могу спарсить любой сайт, вопрос в сроках и цене.
    Цены и сроки у меня адекватные.
    Очень внимательная и ответственная.
    С удовольствием с Вами буду сотрудничать.
    Telegram - https://t.me/maria_belozerka

    Украина Украина | 9 ноября в 21:11 |
  3. 10 дней11 111 ₽
    Movement
    Movement Group
    225   

    Здраствуйте! Задание очень интерестное! Готов реализовать)
    Есть опыт создания парсеров(Смотрите портфолио)
    Сделаю как можно быстро!!!
    Мониторить программа для пк может? Или лучше на сервер загрузить?
    Цену указал и за парсинг всех данных и за постоянный мониторинг.
    Для быстрой связи со мной, пишите в телеграм: MovementGroup

    Украина Ровно | 9 ноября в 21:47 |
  4. 3 дня5 000 ₽
    Роман
    Роман Балицький
    413     3  0

    привет
    задача понятна готов приступить после уточнений деталей

    Украина Ивано-Франковск | 9 ноября в 22:50 |
  5. ставка скрыта фрилансером
  6. ставка скрыта фрилансером
  7. 1 день4 000 ₴
    Никита
    Никита Коляда
    131   

    Добрый день!

    С удовольствием с Вами буду сотрудничать. Зделаю за 1-2 дня смотря какая структура.
    Телеграм - @nikita_koliada

    Украина Киев | 10 ноября в 13:44 |
  8. ставка скрыта фрилансером
  9. 2 дня10 000 ₽
    Александр
    Александр Михайлович
    238   

    Готов спарсить все страницы, выполнить задачу №1
    1) Выполняю парсинг сайтов различной сложности и объемов данных.
    2) Могу делать обработку парсинга.
    3) Сделаю тестовый парсинг до начала работы.
    Если заинтересовались, обращайтесь.

    Украина Чернигов | 12 ноября в 17:10 |