Разместите свой проект бесплатно и начните получать предложения от фрилансеров-исполнителей уже спустя минуты после публикации!
2 000 ₴

Парсер квартир (Python/Пайтон) через API (доработать)

прием ставок


Парсер написан на Python 

Он получает информация по API с Авито и Циан, и распределяем по определенным значениям в необходимые категории на сайте (к примеру если у квартиры есть комиссия, она добавляется в раздел с риелторами и если ее нет, то в раздел с собственниками)


Необходимо улучшить его работу:

1. Уменьшить таймаут 

2. Уменьшить количество попыток перед сменой прокси


Мы месяц назад внедрили риелторов на сайт, то есть начали парсить квартиры с комиссией в отдельный раздел, это увеличило нагрузку на парсер. Когда у нас были одни собственники, то все варианты от собственника которые были на Авито и Циан были у нас на сайте. После добавления нового раздела, много квартир просто нет


Задача исправить проблему с парсингом квартир от собственников, они сейчас не добавляются в необходимом объеме. Покажу вам на примере цифр: Такая ситуация была до проблем с парсингом. В день добавлялось 300-400 квартир от собственников, сейчас не больше 50. Это надо исправить


Технологии: Scrapy - сам парсер + django framework + django rest framework для передачи json сайту. БД -  sqlite3



  1. 7 дней2 000 ₴
    Иван
    Иван Яшин
    178     1  0

    Здравствуйте, думаю могу вам помочь. Цену указал, выше точно не будет, по срокам думаю выйдет 2-3 дня (немного занят просто). Буду рад сотрудничеству.

    Россия Москва | 10 ноября в 13:27 |
  2. 7 дней1 900 ₴
    Vadim
    Vadim Ivanov
    135   

    Здравствуйте. Готов выполнить ваш заказ. Свяжитесь со мной для уточнения деталей

    Россия Москва | 10 ноября в 13:29 |
  3. 1 день2 000 ₴
    Халил
    Халил Мурадов
    221     1  2   1

    Сделаю в течение нескольких часов. Работал с Scrapy, Django и с REST API. Сделаю всё качественно, цена выше не поднимется. Буду рад сотрудничеству.

    Россия Махачкала | 10 ноября в 15:52 |
  4. 4 дня2 000 ₴
    Екатерина
    Екатерина Бутурлакина
    268   

    Здравствуйте. Сделаю быстро и качественно. Строки и стоимость обсуждаемы.
    Связаться Viber/Telegram +380635954436

    Украина Киев | 11 ноября в 00:12 |
  5. 2 дня2 000 ₴
    Vlad
    Vlad Tretiak
    2042     48  0

    Добрый день, Фёдор! Есть опыт работы с Scrapy и django framework, с python работаю более двух лет. Готов взяться за выполнение)
    Можем обсудить детали более подробно?

    Украина Запорожье | 11 ноября в 12:44 |

Заказчик
Проект опубликован
1 день 11 часов назад
143 просмотра
До закрытия
5 дней 12 часов
Метки
  • django
  • avito
  • прикладное программирование
  • Веб программирование
  • scrapy
  • web scraping
  • api-разработка
  • веб-парсинг
  • Python3
  • парсинг данных
  • python django
  • парсер avito
  • python developer
  • python парсинг
  • Парсинг данных на python (PHP)