Написать программу, для сортировки и обновления данных с парсера
30 000 UAHНужно написать Программу, для сортировки и обновления данных с парсера
Напишите пожалуйста:
1) Был ли у вас опыт работы с подобными проектами (может частично)
2) Стоимость работы месяц/день/стоимость всего проекта
3) Сроки реализации
В файлах ТЗ прилагается только схема и вид базы данных. В каком формате данные поступают (Формат Базы или таблицы входящие Данные из Парсера(6 в схеме желтым) и в каком формате расположены дополненные данные для выгрузки (Таблицы для загрузки на сайт (14 в схеме желтым).
Полное ТЗ включает в себя расписанный с примерами ,каждый блок программы. Полное ТЗ предоставляется при выботе испольнителя.
Общая идея:
Объединить данные с разных сайтов и получить таблицу(или базу данных) для загрузки на свой сайт с максимально
наполненными описаниями, отзывами и т.д товаров и списком цен и информации про продавцов как на hotline.ua
1)Есть парсер который синхронизируется и обновляет данные с программой сортировки
2)Данные с парсера поступают в программу с разных сайтов в определенном не меняющимся формате
3)Программа сортировки обработав данные формирует таблицу в заданном формате для синхронизации с сайтом например на OpenCart
4)Программа сортировки это локальная программа на мощном сервере которая должна как можно быстрее
обрабатывать данные и не перегружаться:
4.1) Объем данных для обработки программой написанно по максимуму. Это 100 милионов и товаров и более с данными о товаре с интернет рынка Украины (название, цена, описание, тех характеристики, отзывы и т.д что есть)
4.2) В программе работают фильтры по разным направлениям, категориям и брендам (Строительные материалы, Сантехника, Телевизоры, Спорт и т.д )
4.3) Программа определят и объединяет одинаковые товары (название, цена, описание, тех характеристики, отзывы и т.д
по заданным параметрам)
4.4) Программа формирует списки цен и продавцов по одинаковым товарам
4.5) Программа имеет функцию ручного указания что товары одинаковы
4.6) Программа определяет наибольший ассортимент товаров по каждому Бренду(торговой марке)
т.е выбирает у какой фирмы по заданной торговой марке больший ассортимент и его использует как базовый для
наполнения и поиска одинаковых товаров
5) Созданные настройки в программе и саму программу можно переносить на другие сервера и подключать к парсеру
заново
5.1) После переноса программы можно стереть (обнульть) все данные по логам и товарам. Оставив только настройки
6) Программа имеет авторизацию админ или менеджер
6.1) Админ полный доступ
6.2) Менеджер, доступ только к сортировке в ручную
Заранне благодарен за ответы! с уважением Гончарук Андрей
Напишите пожалуйста:
1) Был ли у вас опыт работы с подобными проектами (может частично)
2) Стоимость работы месяц/день/стоимость всего проекта
3) Сроки реализации
В файлах ТЗ прилагается только схема и вид базы данных. В каком формате данные поступают (Формат Базы или таблицы входящие Данные из Парсера(6 в схеме желтым) и в каком формате расположены дополненные данные для выгрузки (Таблицы для загрузки на сайт (14 в схеме желтым).
Полное ТЗ включает в себя расписанный с примерами ,каждый блок программы. Полное ТЗ предоставляется при выботе испольнителя.
Общая идея:
Объединить данные с разных сайтов и получить таблицу(или базу данных) для загрузки на свой сайт с максимально
наполненными описаниями, отзывами и т.д товаров и списком цен и информации про продавцов как на hotline.ua
1)Есть парсер который синхронизируется и обновляет данные с программой сортировки
2)Данные с парсера поступают в программу с разных сайтов в определенном не меняющимся формате
3)Программа сортировки обработав данные формирует таблицу в заданном формате для синхронизации с сайтом например на OpenCart
4)Программа сортировки это локальная программа на мощном сервере которая должна как можно быстрее
обрабатывать данные и не перегружаться:
4.1) Объем данных для обработки программой написанно по максимуму. Это 100 милионов и товаров и более с данными о товаре с интернет рынка Украины (название, цена, описание, тех характеристики, отзывы и т.д что есть)
4.2) В программе работают фильтры по разным направлениям, категориям и брендам (Строительные материалы, Сантехника, Телевизоры, Спорт и т.д )
4.3) Программа определят и объединяет одинаковые товары (название, цена, описание, тех характеристики, отзывы и т.д
по заданным параметрам)
4.4) Программа формирует списки цен и продавцов по одинаковым товарам
4.5) Программа имеет функцию ручного указания что товары одинаковы
4.6) Программа определяет наибольший ассортимент товаров по каждому Бренду(торговой марке)
т.е выбирает у какой фирмы по заданной торговой марке больший ассортимент и его использует как базовый для
наполнения и поиска одинаковых товаров
5) Созданные настройки в программе и саму программу можно переносить на другие сервера и подключать к парсеру
заново
5.1) После переноса программы можно стереть (обнульть) все данные по логам и товарам. Оставив только настройки
6) Программа имеет авторизацию админ или менеджер
6.1) Админ полный доступ
6.2) Менеджер, доступ только к сортировке в ручную
Заранне благодарен за ответы! с уважением Гончарук Андрей
Приложения 3
-
164 Здравствуйте. У меня есть опыт работы как с базами данных так и с приложениями для C#, использующими сложную логику, в том числе и парсеры, и я готов помочь Вам с написанием Вашего проекта.
Уточните пожалуйста будет ли это исключительно информационный портал или нужно будет реализовать возможность продажи через него. Также собираетесь ли вы делать веб приложение или приложение для пк - советую первое, поскольку оно поможет Вам увеличить охват Вашего приложения.
Готов ответить на Ваши вопросы касательно Вашего проекта. Жду вашего письма для дальнейшего обсуждения.
-
17 1. Имею длительный опыт работы с большими массивами данных, оптимизации БД, повышение скорости обработки данных. (MSSQL Server)
2. Стоимость проекта 30 тыс.
3. Срок реализации 1 мес.
Вариантов решения может быть несколько. Парсеру не обязательно че-то передавать в программу, достаточно писать или в отдельную таблицу на сервере из которой программа будет забирать данные и раскладывать как нужно.
-
309 8 0 1) Был ли у вас опыт работы с подобными проектами (может частично)
Разработка разной сложности и логики парсеров декстоп на C# и веб на PHP. Имею большой опыт разного вида интеграций между базами данных и или файлами.
2) Стоимость работы месяц/день/стоимость всего проекта
Для полного понимания необходимо живое общение хотя бы в чате. Из того что вы написали, я предполагаю стоимость до 30 000, срок месяц. Писать планирую десктоп приложение на C#, БД для приложение MS SQL. Стоимость может быть значительно ниже, иногда заказчик через чур путает краски и запутывает тривиальную задачу :).
3) Сроки реализации
Месяц.
-
95 Есть опыт работы с большими объемами данных и разными поставщиками информации (парсеры и прайс листы). Обработка такая:
1. группировка подобных товаров.
2. Дополнение информации (был опыт с авто товарами)
3. схожесть данных ( с примеру "Эл. чайник" = "Электо чайник")
Физически нахожусь в Николаевской области (60 км от города)
-
1269 15 1 Добрый день. Есть опыт реализации подобных проектов. Можно как под Windows так и под Linux. С радостью отвечу на любые вопросы.
-
75 1 0 Более чем двадцатилетний опыт работы в данном направлении.
Предложил бы написать дестктоп-приложение на Delphi\Free Pascal, а также, по желанию, добавить возможность хранения базы на стороннем хосте - это даст возможность работать с любого рабочего места. Естественно, экспорт в любой указанный вами формат.
Срок - две недели на основу и по 2-3 дня на каждый парсер. Количество парсеров зависит от источников, с которых вы хотите импортировать данные.
О, я смотрю ТЗ сильно обновилось, и как раз в моем направлении. У меня есть ряд готовых решений по автоматической сортировке товаров, можем применить их для вашей задачи.
-
2141 51 0 Здравствуйте, Андрей.
Имеется опыт разработки C# приложений - более 3.5 лет.
Более того, чистый парсинг, проектирование баз данных, работа с SQL Server, Access и SQL Lite - более 3х лет.
Не пропадаю, всегда на связи, отвечаю в течении получаса.
Готов реализовать этот проект в течении 30 дней.
В результате нашей работы Вы получите полностью рабочее, оптимизированное и протестированное приложение.
Ваши вопросы:
1. Более 30-40 мелких парсеров и 1 крупный, всё это - работы за последние 3 года.
… 2. Проект оцениваю предварительно в 100 часов, 12$ \ час, 50$ \ день, весь проект - ~28-30K.
Жду Вашего сообщения, надеюсь на сотрудничество.
-
2070 115 4 6 Здравствуйте.
Могу реализовать Ваш проект.
Опыт разработки огромный, примеры работ в портфолио.
Обращайтесь, выполню качественно и в сроки.
-
129 Добрый день!
Меня очень заинтересовал проект, потому что мне нравится работать с базами данных.
Ранее реализовывала парсеры, которые обрабатывают данные(сортируют медикаменты, данные о земельных участках) и после обработанные данные помещают в таблицы(.xlsx), либо в pdf файлы, либо в xml.
Такую программу можно сделать в виде десктопного приложения на С# Windows Forms или веб-приложения(сайта) на C# MVC - выбор зависит от того, что Вам нужно: запустить программу, она отработала и Вы ее закрыли или, чтобы она работала постоянно. Оба вида смогут обрабатывать большие данные, данное требование учтено!
Мне было бы интересно реализовать программу, потому что занимаюсь разработкой именно баз данных, их моделей(концептуальных, физических) и внедряю в системы написанные на С#, Java...
Сроки примерные - зависит то того, какой вид приложения нужен: десктопное или веб-приложение, а также время внедрения проекта.
-

Добрый день
есть опыт работы в разработке подобных приложений, в частности сортировка и формирования выписок из базы предприятий, формирование отчётов из данных полученых из параметров рейса, программа - обработчик БД склада и т д, территориально нахожусь в Николаеве
-
Добрый день!
Занимаюсь подобными задачами (обработка больших потоков данных в реальном времени). Задачу можем обсудить в скайпе roman.ghost
С уважением,
Роман.
-
Актуальные фриланс-проекты в категории C и C++
Сравнительный анализ эффективности кастомного ПО (v2.2-field) и эталонного ПО (Meshtastic v2.x)
1000 UAH
Сравнительный анализ эффективности кастомного ПО (v2.2-field) и эталонного ПО (Meshtastic v2.x) на идентичной аппаратной платформе (ESP32 + SX1268, 2W) по критериям дальности, пропускной способности, стабильности линка и энергопотребления. Провести тесты с замерами с учетом… C и C++, C# ∙ 3 дня 5 часов назад ∙ 2 ставки |
Консультация и аудит текущего проекта на Odoo 19 Community EditionИщем Odoo разработчика — соло-разработчика с опытом разработки на Odoo 19 Community Edition, в том числе с использованием Claude Code. Нам нужен специалист, который успешно реализовал проекты в Odoo и имеет практический опыт разработки с использованием Claude Code. Важно:… C и C++, Javascript и Typescript ∙ 6 дней 6 часов назад ∙ 8 ставок |
Разработка ПО для Arduino (RF-модули 3–7.5 ГГц, автоматическое сканирование частот)Необходимо разработать систему на Arduino для автоматического поиска активного аналогового видеосигнала и автоматической настройки передатчика на обнаруженную частоту.Планируется использование трех отдельных приемно-передающих модулей: 3000–4200 МГц; 4900–6000 МГц; 6100–7500… C и C++, Встраиваемые системы и микроконтроллеры ∙ 7 дней 7 часов назад ∙ 4 ставки |
Чёрная Украина (RP-проект на базе MTA)
51 835 UAH
|
Инженер по инфраструктуре резидентных проксиМы строим сеть резидентных прокси с нуля — полностью собственную, без сторонних поставщиков. Нам нужен один исключительный сетевой инженер для создания всей технической базы. Что вы будете строить: - Android SDK для фонового использования, который направляет прокси-трафик через… C и C++, DevOps ∙ 13 дней 3 часа назад ∙ 15 ставок |