Создать программу или скрипт для питона /notepad++ или другого приложения для фильтрации данных

Бюджет: 4000 UAH Срок: 3 дня

У меня есть опыт в подобных проектах DataScience, где нужно читать и обрабатывать миллионы строк. Специализируюсь на разработке на Python, готов разработать для вас программу для чтения + GUI интерфейс для фильтрации и отображения данных. Могу работать с различными форматами файлов, будь то txt, csv, xlsx, json или другие.

Готов предложить следующее решение:
- самописная программа на Python для быстрого чтения файлов csv или txt с помощью pandas/polars;
- можем рассмотреть варианты изменения формата файлов перед обработкой для ускорения чтения или обработки (в csv, или импорт в базу данных);
- удобный GUI интерфейс через PyQT/tkinter с фильтрацией и визуализацией данных;
- экспорт в любой формат по завершении обработки;

Пишите, можем обсудить, что непонятно, и приступить к разработке!

Бюджет: 5000 UAH Срок: 3 дня

Здравствуйте! Это очень интересная и классическая задача в области обработки данных. Вы совершенно правы: текстовые редакторы, даже такие мощные, как Notepad++, не предназначены для обработки и фильтрации данных. Они могут отобразить файл, быстро прочитав его по частям, но любая операция "Найти" или "Отфильтровать" вызовет зависание.

Проблема, с которой вы столкнулись, — это нехватка оперативной памяти (RAM). 20 миллионов строк — это слишком много, чтобы загрузить их в память целиком для анализа.

Решение, которое я предлагаю, не будет зависать и справится с этой задачей.

Бюджет: 5000 UAH Срок: 1 день

Я уважно прочитал Ваше ТЗ и рекомендую Вам все данные из csv файлов перенести в базу данных, потому что там будет проще делать все, что Вам нужно. Или нужно писать Python скрипты для этой задачи.

Еще очень трудно оценить работу, не видя структуру файлов. У всех структура одинаковая или разная? Можете скинуть пару файлов для ознакомления?

Готов качественно все выполнить. Обращайтесь.

Бюджет: 1000 UAH Срок: 1 день

Привет, я работал над Проектом "Folder": обрабатывал файлы CSV с более чем 15 миллионами строк, оптимизировал фильтрацию и экспорт в XLSX.

Как вы хотите приоритизировать обработку строк: по порядку или выборочно, чтобы обеспечить скорость и удобство?

Предлагаю связаться, я бесплатно проконсультирую вас с технической стороны и составим план разработки + расскажу о моей команде!

Бюджет: 4500 UAH Срок: 3 дня

Отличный запрос — у меня есть готовый техподход, который без зависаний тянет 10–20 млн строк и даёт быстрые фильтры + выгрузку.

Что сделаю
Открою огромные CSV/TXT без зависаний: построчная/колоночная загрузка и ленивое чтение (без полного чтения в память).
Мгновенная фильтрация по: город, возраст, дата рождения, любые поля (мульти-фильтры, AND/OR, contains/equals/диапазоны).
Отбор N строк (по порядку или вразброс) — например, ровно 500.
Экспорт в CSV или Excel (XLSX).
Маркировка “использованных” строк: повторно не берём; если не хватает — предложу «добрать» из уже использованных с указанием, сколько дозалить.
Очень быстрый просмотр больших файлов с пагинацией (виртуальная таблица, не блокирующая UI).

Как это будет работать (под капотом)
Python + Polars/DuckDB для обработки 10–20 млн строк со стримингом и предикатным пушдауном.
Десктоп-приложение (PySide6/Qt): таблица с виртуальной подгрузкой страниц, мгновенные фильтры, сохранённые пресеты.
Индекс “использованных” строк — отдельная лёгкая БД (SQLite) с ключами по файлу и смещениям/хэшам: не переписываем огромный файл, но помним, что уже отдали.
Случайный отбор — детерминированное/по-настоящему рандомное семплирование (на выбор).
TXT — разбираем по разделителю или по шаблону (задам по умолчанию, можно сменить в настройках).

Плюсы моего подхода
Не падает на файлах 10–20 млн строк (стриминг/ленивая загрузка).
Фильтры очень быстрые (чтение только нужных столбцов).
“Использованные” строки метятся без перезаписи исходника.
Готово к росту: позже можно добавить индексы, перевод в Parquet для сверхскорости.
Что получите
.exe/.app (портативная сборка) + исходники.

Простой интерфейс:
Открыть файл - 2) Выбрать фильтры - 3) Указать “500, порядок/рандом” - 4) Сохранить CSV/XLSX.
Журнал действий и повтор запуска последнего сценария.

Коротко обо мне
Python-разработчик, делаю быстрые data-инструменты и боты. Есть опыт с Flask/интеграциями и обработкой больших данных.

Готов сразу приступить. Если пришлёте пример одного большого CSV/TXT (или схему колонок) — соберу тестовую демо-сборку под ваши кейсы. Развернуть

Бюджет: 4500 UAH Срок: 3 дня

Добрый день. Занимаюсь разработкой на Python. Могу разработать для вас программу для удобной и быстрой обработки больших csv файлов, стек: Python + Pandas + SQLite + графический интерфейс через Streamlit (идеально подходит для обработки данных). Пишите - обсудим детали и сразу приступлю к работе.

Бюджет: 5000 UAH Срок: 3 дня

Здравствуйте. Готов выполнить Ваш проект. Напишите мне и мы обсудим подробности.

Бюджет: 5000 UAH Срок: 12 дней

Добрый день, можно будет создать небольшую программу с возможностью графической оболочкой и при выборе любого файла и фильтрации, могу оформить Вам на Python+PyQt5

Бюджет: 5000 UAH Срок: 7 дней

Сделаю на c++, будет работать независимо от sublime, notepad или чего-либо еще. Обращайтесь для обсуждения деталей задания.

Бюджет: 5000 UAH Срок: 3 дня

Привет 👋🏻
Готова разработать программу на Python для обработки больших CSV и TXT-файлов (до десятков миллионов строк) без зависаний.
Скрипт будет открывать файлы построчно, фильтровать данные по нужным критериям (город, возраст, дата рождения и т.д.), учитывать лимиты строк (например, 500), помечать уже использованные записи и предлагать добор при нехватке.
Результаты сохраняются в Excel или CSV, с возможностью повторной фильтрации без пересечений.
Использую потоковую обработку и оптимизацию памяти (pandas/polars, chunksize), чтобы всё работало быстро даже на слабом ПК.
Срок выполнения — 3–5 дней, стоимость — 5 000 грн.
Готова обсудить детали и показать демо-пример. 💻

Бюджет: 5000 UAH Срок: 5 дней

Здравствуйте! Готов реализовать ваш проект на Python. Могу создать приложение, которое без зависаний открывает большие CSV/TXT файлы (10–20 миллионов строк), поддерживает фильтрацию по городу, возрасту, дате рождения и т.д., с возможностью выбора количества строк (по порядку или в случайном порядке). Также реализую обозначение использованных строк, повторное использование при нехватке данных и сохранение в CSV или Excel. Хотел бы уточнить детали — формат файлов, примеры данных и желаемый интерфейс.

Бюджет: 1200 UAH Срок: 2 дня

Здравствуйте, Игорь!
Хотелось бы задать вам пару интересующих мне вопросов для работы с таким тз. Также было бы хорошо увидеть приблизительную структуру файлов, услышать какие типы файлов вам нужны и прочее.
Буду ждать!

Бюджет: 2000 UAH Срок: 1 день

Добрый вечер, Игорь!
В целом задача ясна, для точного ответа по срокам и цене, хотелось бы уточнить некоторые вопросы, которые у меня возникли после анализа вашей задачи.
Пишите в приватные сообщения — обсудим детали и ваши пожелания.

Бюджет: 4000 UAH Срок: 1 день

Здравствуйте! Готов выполнить данный проект есть большой опыт разработки различных приложений

Бюджет: 3000 UAH Срок: 30 дней

могу написать на python или bash , возможно с веб интерфесом ,

многолетний опыт обработки текстовых файлов , и других ,

Бюджет: 777 UAH Срок: 2 дня

Рассмотрю пример файла, предложу конкретную программную реализацию

Бюджет: 1500 UAH Срок: 2 дня

Добрый день. У меня большой опыт таких задач. Сделаю фильтры и сохранение в любой формат. Нужно более детальное ТЗ и образец данных. Буду рад помочь.

Бюджет: 995 UAH Срок: 1 день

Меня зовут Роман, и я вхожу в топ-5 разработчиков в категории «Искусственный интеллект и машинное обучение» среди ~1600 специалистов на платформе. Гарантирую: - Быстрое и качественное выполнение задания - Четкое соблюдение дедлайнов - Регулярная связь на протяжении всего процесса Буду рад обсудить детали вашего проекта в личных сообщениях.