Срочно доработать парсер сайта через телеграмм
82 USDПарсер по технологии bs4 и requvest на python через телеграмм бота. Сайт avito
1) Устранить баг, когда я паршу больше 10000 объявлений, при запуске команды systemctl status bot выходят ошибки 403, это не может возникать из за прокси так как я использую мобильные прокси мультипорт, со сменой ip каждый запрос, скорее всего этот баг связан с длительной работой парсера. И когда парсер работает долго то запросы как будто идут мимо прокси.
2) Так же посмотреть почему мало результатов парсинга, например из 10000 тысяч объявлений с фильтром по 1 объявлению у продавца выходит всего 150-200 объявлений, я думаю это очень мало.
3)Добавить очередь на использование бота парсинга, то есть что бы одновременно мог парсить например только я или мой товарищ.
5) Добавить смену прокси через телеграмм.
6) Убрать Nan из результат парсинга в столбце номеров ( это связанно с тем что парсятся объявления без номеров)
а так же приписывать + к номерам.
7) Сделать так что бы собирались только уникальные номера телефонов, (можно сделать привязку к каждому юзеру телеграм бота)
8) А так же за доп плату, если у вас получится оптимизировать бот и ускорить его работу я готов платить отдельно.
9) И еще по поводу фильтра хотел сказать пару слов.
Вот когда бот спрашивает "сколько активных объявлений парсить" ниже нужно будет добавить кнопку "Пропустить"
тогда будет второй вопрос - "сколько неактивных парсить" ниже тоже нужно будет добавить кнопку "Пропустить"
то есть, если мы пропускаем указание активных или не активных, то парсится будет все, без фильтра, то есть все объявления. Например, пропустили указание активных, значит будут парсится все не смотря на показатель активных, и так же с неактивными. Главное что бы фильтра не было и в правду, когда мы нажимаем пропустить.
Сделать нужно очень срочно.
-
446 4 0 Здравствуйте!
Есть большой опыт разработки парсеров. Готов взяться прямо сейчас. Работаю очень быстро. Напишите буду ждать)
-
Пришлите, пожалуйста, код в лс.
-
Current freelance projects in the category Bot development
Write a simple bot to track price changes on the website
38 USD
Target website - https://www.tensor.trade/ The website is an NFT marketplace. We will be interested in pages of various collections on the site. An example of such a page - https://www.tensor.trade/trade/famous_fox_federation Bot functionality: 1. Should access the collection… Data parsing, Bot development ∙ 1 proposal |
Telegram bot for multiposting
76 USD
It is necessary to develop a Telegram bot that will allow posting on specified chats and channels according to a schedule. Creating a post, specifying the date and time for posting, whether to pin the post, plus the repetition period. The employee should populate the posts with… Bot development ∙ 18 proposals |
Development of a chat-bot
38 USD
need to create a Telegram chat bot 1) Greeting message after subscribing to the chat. IF NECESSARY 2) Checking subscription to the channel when trying to write in the chat, if the chat user is not subscribed to the channel and wants to post their advertisement in the chat, a… Bot development ∙ 12 proposals |
Telegram bot for copying a large amount of information from a Forum Website
150 USD
Good day, I am looking for a responsible performer who can help with the implementation of my project: I need a Telegram Bot that will transfer information (content, photos, videos up to 2GB with frequent updates) and post it in Telegram channels based on tags. Also, a… JavaScript, Bot development ∙ 15 proposals |
Telegram bot for parking (aiogram, sqlalchemy)To assist the main developer, it is necessary to add logic to the bot (some modules). Bot for parking (hourly payment, opening the barrier for passage). Part of the functionality is already implemented. Mechanically everything is already working. The code is clean and tidy.… Python, Bot development ∙ 11 proposals |