Publish your project for free and start receiving offers from freelance contractors in serveral minutes after publication!
10000 ₽

Написать парсер OLX

project expired


Добрый день 


Нужно написать парсер объявлений с OLX, который будет постоянно собирать данные по объявлениям. Язык программирования Ruby, Python, Go или предлагайте свои варианты. БД будет MySQL. 


Что нужно сделать? 


Парсер, который добавляет данные в БД, работает через прокси и без проблем парит 100-120 тысяч объявлений в день. 


Что уже есть? 


Мощный сервер с 6 ядрами и 32 гб оперативки. 

Есть готовый парсер на Bash+JS, который собрал уже 5 млн объявлений 

Есть база со структурой, куда нужно будет все ложить. 


Что от вас нужно? 


Написать с нуля парсер, имея пример готового парсера и структуры БД, чтобы вам помогло закончить задачу быстрее. Срок 2 дня, по бюджету 10 000 рублей. 


От вас предложение, сроки, примеры работы и вопросы. Задача срочная.


Make a proposal!

The client doesn't want to make prepayment? Offer him to make a payment via Safe to avoid possible fraud.

  1.  5654 
    24   44  0

    2 days10000 ₽
    Misha Titkov verified 

    Здраствуйте, могу реализовать на C++, с выгрузкой в MYSQL. Пример работ могу показать.

    С уважением Миша.)

    Один месяц бесплатная гарантия на поддержку готового продукта. Гарантии выполнения вашего тз в срок. MTitkov Telegram: @Zusykss (https://t.me/Zusykss) Сайт: http://smart-softs.com/

    Ukraine Dnepr | 13 April 2017 |
  2. 2 days10000 ₽
    Олег Кузнецов
     630   8  0

    Здравствуйте.

    Уже работали с массовыми парсерами html. Выполним качественно. Наше портфолио доступно на сайте oxymeal.ru .

    Если вам удобно связаться через скайп, наш аккаунт - oxygen-meal. Либо можем обсудить детали через личку.

    С уважением,
    команда Oxygen Meal.
    oxymeal.ru

    Russia Orenburg | 13 April 2017 |
  3. 2 days4000 ₴
    Олег Федосенко
     299   1  0   1

    Добрый день!
    Сделаю на Python. Готов начать сегодня.
    С парсерами работаю с 2009 года, в т.ч. высоконагруженными.
    Прокси уже приобретены?
    Детали можно обсудить в скайпе horos.ua.

    Ukraine Kyiv | 13 April 2017 |
  4. 2 days8000 ₽
    Сергей Хмелевской
     157 

    Добрый день!
    Портфолио и контакты http://f-end.ru

    Finland Vuokatti | 13 April 2017 |
  5. proposal concealed by freelancer
  6. 3 days10000 ₽
    Владимир Калач
     474   22  0

    добрый день

    есть опыт написания парсеров в excel vba windows

    есть парсер OLX.ua , работает через прокси . многопоточная загрузка контактов.
    парсит около 500 000 объявлений в день.

    можно сделать выгрузку в xls , csv формат

    Нужны подробности, чтобы заточить под Ваши потребности.

    с уважением Владимир.

    https://www.freelancer.com/u/vkalach.html
    https://f r e e l a n c e.ru/vkalach/
    https://freelancehunt.com/freelancer/vkalach.html
    https://www.w e b l a n c e r.net/users/vkalach/

    Ukraine Kyiv | 13 April 2017 |
  7. 2 days10000 ₽
    Сергей Петров
     254   3  1   3

    Здравствуйте. Уже есть готовый парсер OLX на PHP/MySQL. Обращайтесь.

    Ukraine Odessa | 14 April 2017 |
  8. 2 days10000 ₽
    Дмитрий Квашенко
     503   7  1

    выполню на java

    Ukraine Nikolaev | 14 April 2017 |
  9. 32 days30000 ₴
    Микола Федорів
     2456  verified   56  0

    могу помочь

    Ukraine Ivano-Frankovsk | 14 April 2017 |
  10. 10 days10000 ₴
    Юрий Фрилансер
     370   1  1

    100-120 тысяч объявлений в день - это несколько запросов в секунду, надо много прокси и боле менее нормальных, желательно асинхронный доступ к базе, что то быстрое для сохранения промежуточных данных....
    -предлагаю Асинхронный скрипт на питон, асинхронный драйвер, база монгодб, кэш редис, веб интерфейс, экспорт в необходимом формате, рест интерфейс доступ к данным - для интеграции, прокси, многопоточность
    при необходимости загрузка картинок
    [email protected]
    skype wku-lg

    Ukraine Ukraine | 14 April 2017 |
  11. 2 days10000 ₽
    Тарас Заморин
     213 

    Здравствуйте. Пишу парсеры на Python.
    Уже был в разработке мультипоточный парсер olx. Скорость парса при этом была 40000 объявлений за 20 мин (т.е. ваш объем в 120к объявлений будет парсится ~1 час). И такая скорость, конечно, достигалась без проксей, потому что olx не банит (иногда пускает эрроры при запросе на номер телефона, но все равно его отдает).

    Вы описали что собрали уже 5 млн объявлений, но разве вам не нужны только актуальные? мой парсер, например, был настроен парсить каждый час за последний час, при этом объявления старее 14 дней удалялись.

    Если заинтересовало, то пишите - буду ждать структуру БД.

    Skype: Ultharas
    E-mail: [email protected]

    Ukraine Ukraine | 17 April 2017 |
  12. 2 days10000 ₽
    Art System
     412   4  0

    Качественно выполним поставленную задачу.
    Skype: Team ArtSystem
    Mail: [email protected]
    Phone: +380997983974

    Ukraine Herson | 17 April 2017 |