Parsing AutoRIA
Task - https://docs.google.com/document/d/1e0o41hVJH1G2jdTorFCVWc4-pGfiO7F_L11mp8RmQD4/edit?tab=t.0
Задание - https://docs.google.com/document/d/1e0o41hVJH1G2jdTorFCVWc4-pGfiO7F_L11mp8RmQD4/edit?tab=t.0
-
267 😄 Hello,
Undoubtedly, after reviewing your job description, I see that your project is primarily related to web scraping, data cleaning, and exporting them. As an experienced developer in this field, I am confident in my ability to complete this task without any issues.
I have used Python and the BeautifulSoup library for parsing HTML. It is great for navigating, searching, and modifying the parse tree. To automate script execution, I have used the built-in Python sched module for task scheduling, similar to cron jobs.
Additionally, for sending HTTP requests and receiving responses, I have used the requests module, and to bypass Cloudflare protection and similar services, I worked with cfscrape.
Regarding websites that render content using JavaScript, I have used Selenium WebDriver along with PhantomJS, which allowed me to simulate user behavior in the browser and obtain dynamic content, and to bypass Cloudflare protection and similar services, I worked with undetected_chromedriver.
…
I reviewed your technical specifications and do not understand some points. If hidden, we take it from the Bidfax link, as this is a unique identifier for the car. I do not understand how we are supposed to obtain it from Bidfax and where this link is located. It is also unclear where we should get the "Modification."
I would recommend adding another cell to the database — the sale date, so we can track if the car disappeared from the site and reappeared after 61 days.
🕒 I am open to both part-time and full-time employment, and I am flexible regarding time zones. I am confident that I can ensure the quality execution of your project, and I guarantee that you will not be disappointed with our collaboration.
I look forward to further discussion. Thank you for considering my proposal!
😄 Привіт,
Безсумнівно, після перегляду вашого опису вакансії я бачу, що ваш проєкт переважно пов'язаний із веб-скрапінгом, очищенням даних та їх експортуванням. Як досвідчений розробник у цій сфері, я впевнений у своїй здатності виконати це завдання без проблем.
Я використовував Python і бібліотеку BeautifulSoup для парсингу HTML. Вона чудово підходить для навігації, пошуку та модифікації дерева розбору. Для автоматизації виконання скриптів я застосовував вбудований модуль Python sched для планування завдань, аналогічно до cron-завдань.
Крім того, для надсилання HTTP-запитів і отримання відповідей я використовував модуль requests, а для обходу захисту Cloudflare та подібних сервісів працював із cfscrape.
Щодо сайтів, що рендерять контент за допомогою JavaScript, я використовував Selenium WebDriver разом із PhantomJS, що дозволяло мені імітувати поведінку користувача у браузері та отримувати динамічний контент а для обходу захисту Cloudflare та подібних сервісів працював із undetected_chromedriver.
…
Я переглянув ваше ТЗ і не розумію деякі моменти. Vin Якщо прихований то беремо з посилання Бідфакс, оскільки це унікальний ідентифікатор авто. Я не розумію, як саме ми маємо його отримати з Бідфаксі де знаходиться це посилання. Також не зрозуміло, звідки нам брати "Модифікацію".
Я б рекомендував додати в базу даних ще одну ячейку — дату продажу, щоб ми могли відстежувати, якщо машина пропала з сайту і з'явилася через 61 день.
🕒 Я відкритий як до часткової, так і до повної зайнятості, а також гнучкий щодо часових поясів. Я впевнений, що зможу забезпечити якісне виконання вашого проєкту, і гарантую, що ви не будете розчаровані нашою співпрацею.
Буду радий подальшому обговоренню. Дякую, що розглянули мою пропозицію!
-
202 Good day
I have 4.5 years of experience in IT
I have experience with web scraping and working with databases
I am ready to complete your task
Доброго для
Маю 4.5 років досвіду в IT
Маю досвід з парсингом сторінок та роботи з базами даних
Готовий виконати ваше завдання
-
402 2 0 Hello!
I am interested in your task, as I have already worked with parsing for auto.ria, only instead of PostgreSQL I stored the data in SQLite, and sent all changes via a TG bot to a separate channel. I will complete it quickly and efficiently.
My work example:
https://freelancehunt.com/showcase/work/parser-avtomobiliv-auto-ria-com/1907416.html
Вітаю!
Зацікавила Ваша задача, оскільки уже працював з парсингом для auto.ria, тільки замість PostgreSQL зберігав дані в SQLite, і всі зміни надсилав через ТГ бота на окремий канал. Виконаю швидко і якісно.
Мій приклад роботи:
https://freelancehunt.com/showcase/work/parser-avtomobiliv-auto-ria-com/1907416.html
-
570 4 0 Hello! I can do it if it's not very urgent. Contact me, we will discuss the details.
Вітаю! Можу виконати, якщо не дуже терміново. Звертайтесь, обговоримо деталі
-
4341 70 0 Good day. There is a ready parser for Ria, we will need to play around a bit to adapt the data to the required format. I will be happy to collaborate.
Доброго дня. Є готовий парсер Ріа, потрібно буде трохи погратись, щоб зробити адаптацію даних під потрібний формат. Буду радий співпраці
-
426 I can perform parsing in Python. I have questions about the database. I have experience with parsing.
Можу виконати парсинг на python. Є питання з базою даних. Маю досвід з парсингу
-
2311 82 0 Ready to do it.
______________________________________________
Готов сделать.
______________________________________________
-
з вінкодом є нюанси - його можна приховувати
-
- що маєте на увазі? як саме ідентифікувати авто?Якщо прихований то беремо з посилання Бідфакс
-
Є свіжа база усіх легкових авто (300к+), зі всіма можливими параметрами та контактами.
Можу модифікувати парсер під ваші потреби -
Current freelance projects in the category Data Parsing
Data parsing from the website to Google SheetsThe task is to parse the list of top-100 users from the website and transfer this data to my Google Sheets. More detailed specifications - https://docs.google.com/document/d/1okAE1C9M1KVorxzUuIFRAQKxFkxkUnADabLsgGxNt3s/edit?usp=sharing Web Programming, Data Parsing ∙ 13 hours 18 minutes ago ∙ 12 proposals |
Instagram parser
48 USD
Need a parser for Instagram In order to extract into a table (desired indicators) phone link to the page gender age geo Goal: to run ads on Instagram targeting competitors' followers and similar ones (competitor https://www.instagram.com/lesnik.pro/) Target audience: M/F 40-65… Data Parsing, Bot Development ∙ 14 hours 11 minutes ago ∙ 4 proposals |
Parsing data from car manufacturers' websitesHello examples of websites link 1 link 2 link 3 (about 50 websites) Need the name of the car, price, vin, price, and other characteristics csv file Update once a day Data Parsing ∙ 15 hours 2 minutes ago ∙ 9 proposals |
Parse web pages olx.pl, adresowo.pl, and others. https://www.adradar.pl/
129 USD
We need to create a parser for ads from OLX phone numbers. There is another site that is also Polish. There are several options for how this can be done. The first is through Bearer, but it has its own problems, and the second is through Selenium or another library. The problem… Data Parsing, Python ∙ 17 hours 5 minutes ago ∙ 15 proposals |
Import of goods to the OpenCart site
17 USD
It is necessary to import products from an XML file (export from Prom UA) to the OpenCart (OcStore) website. The XML file contains external links to images (product photos) on Prom UA to avoid manual uploads. The "Universal Import/Export Pro" module has been purchased and… Web Programming, Data Parsing ∙ 17 hours 11 minutes ago ∙ 11 proposals |