Publish your project for free and start receiving offers from freelance contractors in serveral minutes after publication!

Парсер интернет-магазинов сша и европы с пересылкой в телеграмм и вайб

project expired


Здравствуйте уважаемые фрилансеры. Нам нужем парсер для интернет-магазинов США и Европы. Парсить нужно будет, например, вот эти сайты: https://www.amazon.com/ , https://www.ralphlauren.com/ , http://www2.hm.com/en_gb/ ,  https://www.lidl.de/ ,  https://www.walmart.com/ , http://www.sportsdirect.com

Магазинов много. В идеале или все желаемые магазины чтоб были готовы, или с возможностью самостоятельно по аналогии доделать самому, если это реально.

Вот список требований к парсеру:

  • 1.Парсер должен работать онлайн на сервере в связке с движком магазина.
  • 2.Парсер должен парсить большое количество товаров, порядка 50-200 позиций в каждом магазине.
  • 3.При парсинге должны копироваться определенные данные из карточки товара, а именно: Название, цена в валюте, фотография.
  • 4.Нужно чтобы при парсинге у добавленных товаров автоматически прописывались человеко-понятные ссылки. В принципе подойдут ссылки как на сайте доноре http://www.sportsdirect.com/karrimor-summit-mens-walking-shoes-183030?colcode=18303005 или похожие на них, то есть ссылка + идентификатор или артикул. В общем, главное чтобы у спаршеных товаров не было ссылок вида index.php?route=product/product&product_id=40 . В идеале хочется, чтоб оригинальную ссылку укоротили через шоткат, например, https://bitly.com/ .
  • 5.Так как названия и описания товаров на сайте доноре идут на языке оригинала, то при парсинге, они должны быть идентичными.
  • 6.Должна быть возможность запускать парсер в автоматическом режиме по расписанию, скажем один раз в сутки. При этом парсер должен проверять наличие позиций на сайте доноре. Если их нет в наличии, то не парсить.  
  • 7.Кроме автоматического режима должна быть также возможность для запуска парсера в ручном режиме. У нас в дальнейшем должна быть возможность добавлять в парсер новые категории из сайта донора и удалять те категории, парсинг которых нам больше не нужен.
  • 8.Парсер должен иметь возможность работать через прокси или другие анонимайзеры, на случай если сайт донор будет вводить какие либо ограничения. Также в парсере должны присутствовать настройки самого парсера, например задержка при парсинге, сколько товаров парсить и за какое время, какие характеристики товара парсить а какие нет, и т.д.
  • 9.Если после парсинга какие либо параметры товара будут нами изменены в ручную то при повторном парсинге или при парсинге по расписанию, парсер не должен перезаписывать внесенные нами изменения (Этот вопрос надо уточнять с разработчиком).
  • 10.При настройке парсера нужно будет учесть, что один и тот же товар может иметь разную цену в зависимости от размера, или цвета выбранного пользователем. Парсер должен нормально сосуществовать с данными опциями магазина.
  • 11.Все спарсенные товары нужно будет кидать в мой транзитный закрытый канал с подписчиками в телеграмме и вайбере в группу. Это можно сделать через ботов телеграмма. Чтоб трансляция шла паррельно в телеграмм и вайбер.
  • 12.Также для подстраховки нужна возможность парсить все в http://telegra.ph/v0h-tcp-1-02-14 . Заодно и пример.
  • 13.В целом подытожив, скажу, что результатом работы парсера должен быть готовый каталог товаров, с корректно работающими фильтрами, и корректно отображающимися фотографиями.

Вот в принципе и все, подробности будем обсуждать при личном общении. Возможно, я не описал здесь каких то моментов по тому, что сам их еще не очень хорошо понимаю, или же наоборот написал, что то лишнее что нельзя реализовать именно так, а можно как то иначе, в любом случае нюансы будем обсуждать при личном общении.

От вас как разработчика мы бы хотели узнать цену и предполагаемый срок изготовления и настройки парсера. Также при условии плодотворного сотрудничества мы будем очень заинтересованы в долгосрочной поддержке парсера.

В крайнем случае, мы готовы рассмотреть готовые варианты парсеров при условии демонстрации их качественной работы.

Заранее всем благодарна!.

Applications 3

Only registered users can view attachments.


  1.  freelancer isn't working in the service any longer
  2. 20 daysconcealed
    Игорь Быстревский
     225   1   0

    Добрый день! Проект интересный, готов посотрудничать. Могу реализовать на Python. по поводу деталей пишите в Л.С

    Ukraine Vinnytsia | 16 March at 17:45 |
  3.  freelancer isn't working in the service any longer
  4. 10 daysconcealed
    Виктор Шитюк
     226 

    Здравствуйте

    В первой итериции будет сделано:
    1. Админка, с которой Вы сможете управлять парсером
    2. Сможете просматривать и фильтровать все товары по заданным фильтрам из админки, а также изменять их
    3. Все пункты со 2 по 13.
    4. Парсер для одного из магазинов. Остальные будем добавлять постепенно.

    Могу сделать аппарат для связи данной системы с интернет магазином (магазин и парсинг система не должны находиться на одном сервере)

    Если заинтересовал, обращайтесь

    Ukraine Kyiv | 20 March at 22:20 |
  1.  463 
       3   0

    30 daysconcealed

    Здравствуйте. Проект крупный и указанные магазины непросты для парсинга. Готов на долгосрочное сотрудничество. Имеется большой опыт в парсинге и мониторинге торговых площадок типа прома или олх.

    Ukraine Odessa | 18 March at 11:11 |
  • Денис Демидов
    Complain | 16 March at 17:41 |

    На чем работает магазин ваш?

  • Виктория Моргун — project author
    Complain | 16 March at 20:19 |

    Добрый вечер! 

    Это не магазин. Работаю в группах в телеграмм и Вайбере. Нужно такими каталогами наполнять группы. Но делать это надо самой. Много нюансов есть. 

  • Виктория Моргун — project author
    Complain | 16 March at 22:16 |

    Добрый вечер!

    Это не магазин. Работаю в Вайбере в группах и телеграмме в закрытом канале. И нужна ежедневная рассылка по акционные магазинам с отфильтрованными позициями.


  • Add

Project published
16 March at 17:37
103 views