Parking of Metadata Sites
There is a large list of sites.
You need to cut metadata from them to learn NLP models in order to determine the niche.
Data such as:
The top menu:
Topics
Categories
author name Meta Data (Meta Tag)CategoriesAuhtor InformationHeadings and SubheadingsBlog Post TitlesPublication DateContent StructureAbout Us PageArchivesHTML TagsStructured Data MarkupWebsite NavigationFooter TextRSS feedmain-navigation__item menuAdvertising and other relevant information for our purpose.
Storage in Mong Bd in the cloud.
Working under the Ubud 22.04
Comments and instructions in English.
Controlling versions through GitHub
-
4 days99 USD
151 4 days99 USD
Hello to you! Ready to help with the parsing of metadata with a large list of sites for learning NLP models and defining the niche. However, due to the lack of specific sites and details about the data structure, it is difficult to give a precise assessment of the project.
Given my experience in web development and working with Python and various databases, I’m developing an effective parser to extract data such as topics, categories and authors’ names from websites.
Let us discuss additional details and requirements for a more accurate assessment and successful implementation of the project. I will be happy to cooperate!
-
4 days89 USD
194 4 days89 USD
Hello to you!
As a fullstock developer with experience in Python (Flask, Django) and databases (MySQL, PostgreSQL, MongoDB), you are interested in your project on parsing metadata with a wide list of sites to learn NLP models and save in the cloud MongoDB. I understand that to evaluate the project with accuracy, it is necessary to clarify details, such as data volume, structure and site distribution. Ready to discuss the project and the optimal solutions for its implementation. I’m going to work under Ubuntu 22.04, controlling the version through GitHub. Instructions and comments in English. Let’s contact us and start working on the project!
-
3 days67 USD
294 3 1 3 days67 USD
Great experience of Parsons. Django, Flask and FastAPI
Work with any databases (mySQL, PostgreSQL, Oracle, MongoDB) and file types.
BS, Selenium and RestAPI.
Clean code according to all PEP8 instructions.
The final cost and time depends on the number and structure of the sites you need to pay.
-
2 days45 USD
266 2 days45 USD
Good day . I am a senior web developer with experience in the industry since 1998. Your task is generally understandable, but cannot you give a concrete? For example, are many websites of the same structure? "Footer text" is always in one place or is there a sign of its presence? The same goes for navigation, for example. Is this a single operation or do you want it to be a service in your project? What is the technology of the project now? Could you give answers to questions?
-
Який конкретно список сайтів? Скільки там сайтів і які вони по структурі/складності. Які саме сторінки на цих сайтах парсити і де там шукати вказані дані? Ціна строки сильно буде залежити від всіх цих даних.
-
Сайтів багато. Можна почати з першого - https://www.togetherprice.com/us/.
Де брати дані Ви самі повинні знайти, якихось може не бути - звісно якщо даних немає, то і взяти нема звідки. Я дав загальних список полів, які потрібні. -
10 ? 100 ? 100 ?
-
Звідки розробнику знати де ці дані на сайтах лежать?
-
Дивитися на код сайту, досліджувати та розбирати його у пошуку потрібних даних. Якщо Ви не розумієте цього, то задача не для Вас.
-
Я про те що постановка задачі абстрактна. Це так само як казати що буде коштувати багато грошей, але почніть з суми ... $
-
Тут перше питання не про ціну, а про розуміння задачі.
-
Так немає розуміння що саме парсити. Весь сайт або тільки певні сторінки? Треба авторизовуватися на сайтах або ні.
-
З опису проекту повинно бути зрозуміло, що парсити. Я вже дав лінк сайту. Описав поля для інфо яка потрібна. Можливо, Вам просто не вистачає досвіду для розуміння задачі.
-
Якого досвіду? Читання думок ? 🙂
-
Тикати пальцем на кожне поле і де воно знаходиться я не збираюсь. Поля необхідні є, лінк є. Достатньо, щоб знайти те, що необхідно.
Ви сайт хоч дивились? Пробували знайти необхідну інфо?
-
Ок. Якщо все таки надумаєте, пояснювати нормально пишіть.
-
Задача в дійсності не є складною - треба робити раз за разом пошук по сторінкам сайту на наявні значення, знаходити їх і записувати. Підходів до вирішення такої задачі є масса, стронг джуніор розробник справиться.
Питання тільки в тому, що на фрілансханті дуже мало толкових людей залишилось (навіть джунів). Осталися в більшості "самоучки", які дуже хочуть гроші, а знань відповідних немають. Решта - або на війні, або закордоном.
Олександр, шукайте на upwork або fiver. На останньому десь ніби бачив вже готові парсери для вашої задачі.
-
Дякую за пораду, але хотілося б давати можливість заробляти нашим - українським програмістам, а не закордонним.
-
Ну так я про Українців і говорю, добра частина перейшла на американські, європейські портали, тому що на фрілансхант демплять ціни.
-
Чому стронг джуніор сам не береться?
Питання як раз до самих значеннь, що мається на увазі і у якому форматі це зберігати. І звісно до об'ємів. Великі об'єми викл. інші проблеми.
Крім того це фріланс якост дивно скарджитися на самоучек.
-
Current freelance projects in the category Javascript and Typescript
I am looking for an experienced Full Stack developer to create a SaaS service for online stores.Service idea: The client uploads a link to their product feed (XML or CSV). The service automatically retrieves the products, takes their photos, and creates new advertising images based on ready-made templates: price, discount, logo, promotional tags, etc. There should also be… Javascript and Typescript, Web Programming ∙ 1 day 11 hours back ∙ 81 proposals |
Development of a WebGL/Three.js scene with generation and export of 3D (snapshot) from an animated shaderObject Description:The project is a designer table shaped like a realistic, deep whirlpool (a central vortex that smoothly transitions from a wide horizontal tabletop to a thin elegant leg). Task Essence:A WebGL / Creative Coding developer is required to create an interactive 3D… Javascript and Typescript, Web Programming ∙ 2 days 7 hours back ∙ 29 proposals |
Support and development of the cleaning company's website
20 USD
I'm looking for a web developer/webmaster for long-term support and development of a cleaning company's website. Website: https://donely.ca About the project DoneLy Home Services is a cleaning service company in Canada that is actively growing and expanding its geographical… Javascript and Typescript, Web Programming ∙ 4 days 9 hours back ∙ 63 proposals |
Development of a website according to the specifications on FramerYou need to create a website based on the parameters in the technical specification. https://docs.google.com/document/d/1ODO2C9Krb4AaMiJz9wfbNzWlAyA2FwCCHL8r0biajUY/edit?usp=sharing Please provide your actual rate based on this design. HTML & CSS, Javascript and Typescript ∙ 5 days 10 hours back ∙ 28 proposals |
Development of an interactive Palworld map for the websiteWe need to develop an interactive map for Palworld based on the example: https://palworld.gg/map We need not just a static image, but a full-fledged interactive map where users can view locations, toggle object categories on/off, search for specific points, and interact with… HTML & CSS, Javascript and Typescript ∙ 7 days 1 hour back ∙ 36 proposals |
Kharkiv