ITFreelance.by
Поиск работы:
vk.com twitter.com Открытые проекты ITFreelance.by
Парсинг сайтов
1 BYN | Дней: 30

Здравствуйте. Нам нужен парсер интернет-магазинов Европы на свою площадку РБ и РФ. Так же нам нужна консультация в выборе площадки.
Ориентир и пример это платформа www.kupivip.ru

Парсить нужно будет вот эти сайты:
https://de.sportsdirect.com/
https://www.bestsecret.com/home.htm
https://www.bestsecret.com/r.htm?...
https://www.brands4friends.de/webshop/start
https://www.limango.de/home/
https://www.zalando-lounge.de/event
https://www.mandmdirect.de/
https://www.outletcity.com/de-de/shop/herren/
https://secure.de.vente-privee.com/ns/de-de/home/default/classic
https://www.corso.de

Примерhttps://de.sportsdirect.com/ парсят на http://sportsterritory.com.ua


Вот список требований к парсеру:

1.Парсер должен работать онлайн на сервере в связке с движком магазина.
2.Парсер должен парсить большое количество товаров, для начала 2-3 европейских дисконт центра.
3.При парсинге должны копироваться определенные данные из карточки товара Название, цена через настраиваемые алгоритмы в РБ,РФ рублях фотография.
4.Нужно чтобы при парсинге у добавленных товаров автоматически писывались человеко-понятные ссылки. В принципе подойдут ссылки как на сайте доноре http://www.sportsdirect.com/karrimor-summit-mens-walking-shoes-183030?colcode=18303005 или похожие на них, то есть ссылка + идентификатор или артикул. В общем, главное чтобы у спаршеных товаров не было ссылок вида index.php?route=product/product&product_id=40 . В идеале хочется, чтоб оригинальную ссылку укоротили через шоткат, например, https://bitly.com/ .
5.Так как названия и описания товаров на сайте доноре идут на языке оригинала, парсинг с переводом на русский.
6.Должна быть возможность запускать парсер в автоматическом режиме по расписанию, скажем один раз в сутки. При этом парсер должен проверять наличие позиций на сайте доноре. Если их нет в наличии, то не парсить.
7.Кроме автоматического режима должна быть также возможность для запуска парсера в ручном режиме. У нас в дальнейшем должна быть возможность добавлять в парсер новые категории из сайта донора и удалять те категории, парсинг которых нам больше не нужен.
8.Парсер должен иметь возможность работать через прокси или другие анонимайзеры, на случай если сайт донор будет вводить какие либо ограничения. Также в парсере должны присутствовать настройки самого парсера, например задержка при парсинге, сколько товаров парсить и за какое время, какие характеристики товара парсить а какие нет, и т.д.
9.Если после парсинга какие либо параметры товара будут нами изменены в ручную то при повторном парсинге или при парсинге по расписанию, парсер не должен перезаписывать внесенные нами изменения (Этот вопрос надо уточнять с разработчиком).
10.При настройке парсера нужно будет учесть, что один и тот же товар может иметь разную цену в зависимости от размера, или цвета выбранного пользователем. Парсер должен нормально сосуществовать с данными опциями магазина.
11. Возможно ли каким-то образом реализовать планер для выгрузки части товаров в вк, инсаграмм, телеграмм по заданным фильтрам.
12.В целом подытожив, скажу, что результатом работы парсера должен быть готовый каталог товаров, с корректно работающими фильтрами, и корректно отображающимися фотографиями.
Возможно, я не описал здесь каких то моментов по тому, что сам их еще не очень хорошо понимаю, или же наоборот написал, что то лишнее что нельзя реализовать именно так, а можно как то иначе, в любом случае нюансы будем обсуждать при личном общении.
От вас как разработчика мы бы хотели узнать цену и предполагаемый срок изготовления и настройки парсера. Также при условии плодотворного сотрудничества мы будем очень заинтересованы в долгосрочной поддержке парсера.
В крайнем случае, мы готовы рассмотреть готовые варианты парсеров при условии демонстрации их качественной работы.


Требования
Исходный код
Основные файлы
Тестирование в операционных системах по моему выбору

02.11.2018 | profit
Просмотров 220 / Заявок 2

К списку вакансий