Исправить парсинг данных в Excel

«Здравствуйте! Ознакомился с вашим заданием и ошибкой WinError 10061. Она возникает из-за разрыва соединения между драйвером браузера и скриптом во время длительной работы. Как я предлагаю решить проблему:

Стабильность 24/7: Добавлю в код обработку исключений (Error Handling). Если скрипт потеряет связь, он автоматически перезапустит сессию без вашего участия.
Оптимизация записи: Внедрю буферную запись. Данные сначала будут собираться локально, а затем загружаться в Google Sheets большими блоками. Это решит проблему с "тяжелой" таблицей.
Аудит: Проверю нагрузку на память удаленного ПК, чтобы устранить причину зависаний.

Условия:
Стоимость: 1500 грн (через Сейф).
Срок: 1-2 дня на исправление и тестирование.
…
Готов приступить к работе сразу после получения доступа к коду.»

Показать оригинал

Перевести

Добрый вечер!
У меня есть опыт исправления и оптимизации существующих парсеров, в том числе тех, которые были реализованы через Excel / Google Sheets и имеют проблемы со стабильностью при длительной работе.
Я хорошо понимаю типичную ситуацию, когда:
парсер работает несколько часов/дней,
потом удаленный ПК начинает "падать",
Google Excel/Sheets разрастается и становится узким местом (память, лимиты, синхронизация).
Что могу сделать:
Разобрать и исправить логические ошибки парсинга
проанализировать прикрепленный пример ошибки;
… проверить обработку исключений, дубликаты, сбои в форматировании данных;
исправить некорректную запись в таблицу.
Оптимизировать архитектуру под работу 24/7
вынести накопление данных из Google Excel в более стабильное хранилище (локальная БД / файлы / очереди);
уменьшить количество операций записи в Google Sheets;
добавить контроль памяти, перезапуски процесса, логирование ошибок;
сделать парсер стабильным для долгосрочной непрерывной работы.
Уменьшить зависимость от удаленного ПК
проанализировать, почему система "лягает" через несколько дней;
предложить решение, которое не требует постоянного ручного контроля.
Результат:
исправленные ошибки парсинга;
стабильная работа 24/7 без сбоев;
рекомендации или внедрение оптимальной схемы хранения данных;
минимизация нагрузки на Google Excel.
Для старта нужны:
доступ к текущему решению (скрипт/Excel/описание логики);
понимание, какой объем данных накапливается за сутки;
где именно сейчас запускается парсер (локально / VPS / удаленный ПК).
Готова подключиться и навести порядок в решении.

Показать оригинал

Перевести

Здравствуйте!
Я могу помочь исправить парсинг данных в Excel/Google Sheets.
Уточните, каким образом сейчас парсер работает (какой код/какой инструмент используется — Python, Google Apps Script, другое?), и как именно возникают сбои (падения, зависания).
Я могу:

- проверить код парсера

- оптимизировать логику обработки данных

… - предложить способ, чтобы скрипт работал стабильнее

Спасибо!

Показать оригинал

Перевести

Здравствуйте! Готов выполнить данный проект есть большой опыт разработки различных приложений

Здравствуйте. Ознакомился с задачей и примером ошибки.

Могу исправить ошибки в текущем парсере и оптимизировать его работу для стабильной работы 24/7. Устраню причины зависаний и сбоев при длительном выполнении, уменьшу нагрузку на систему и добавлю корректную обработку ошибок.

При необходимости настрою логирование и автоматическое восстановление работы, чтобы процесс не останавливался.

Готов просмотреть код и быстро предложить решение.

Показать оригинал

Перевести

Добрый вечер.
Меня зовут Алексей.
Готов исправить все ошибки и улучшить код (если это возможно),
готов все выполнить быстро и качественно, так как не раз работал с Google Sheets.
Выполню все в течение дня!
С уважением, Алексей.

Буду рад сотрудничеству!

Показать оригинал

Перевести

Добрый вечер. Если скрипт написан на python, то смогу исправить.

Показать оригинал

Перевести

Здравствуйте, разработчик на python с опытом более 5 лет, я так понимаю, по скриншоту используется selenium, можем обсудить либо улучшения, либо просто решение проблемы с сохранением сессии браузера и перезапуском при сбоях. Пишите в личные сообщения, обсудим детали, буду рад сотрудничеству!

Показать оригинал

Перевести

Привет. Могу подхватить и довести этот парсинг до нормального «24/7», но здесь важно не латать Excel, а убрать причину падений.

Из того, что вы описали, проблема типичная: Google Sheets/Excel как “база данных” раздувается, начинает тормозить, лимиты/квоты/память, и в какой-то момент все валится вместе с удаленным ПК.

Что сделаю:

быстро пройдусь по ошибкам в формулах/парсере (как в вашем примере) и исправлю логику

добавлю нормальное логирование + автоперезапуск, чтобы скрипт сам поднимался после сбоев
…
оптимизирую запись данных: батчами, без лишних перерасчетов/форматирований, чтобы не «убивать» таблицу

если таблица уже большая — предложу правильный вариант для 24/7: сохранять данные в БД (PostgreSQL/SQLite) или хотя бы в файлы (CSV/JSON) + в Google Sheets отдавать только «витрину» (последние N строк / агрегаты)

Поясню прямо: сделать стабильный 24/7 парсинг, который пишет бесконечно в Google Sheets, — почти всегда плохая идея. Для непрерывной работы нужно место хранения, которое для этого создано.

Для старта мне нужно: доступ к файлу/скрипту, коротко описать где запускается (Windows/VPS), и ссылка на Google таблицу или ее копию. После этого дам точную оценку по времени и предложу кратчайший путь к стабильности.

Показать оригинал

Перевести

Здравствуйте Виталий, я тот кто Вам нужен.
Мой стэк, за плечами большой опыт.
Пишите в личные обговорим.

Готов оперативно и качественно выполнить ваш заказ. Имею опыт работы с аналогичными проектами, всегда соблюдаю дедлайны и техническое задание. Буду рад сотрудничеству!

Показать оригинал

Перевести

Вижу ошибку WinError 10061 / Превышено максимальное количество попыток до localhost — это означает, что WebDriver (Chrome/Chromedriver) “падает” и соединение с ним отклоняется. Исправлю: добавлю health-check + автоперезапуск драйвера/браузера, стабильные таймауты/ретраи и логирование, чтобы парсер работал 24/7. Также оптимизирую запись в Google/Excel (пакетно), чтобы не зависало из-за размера таблицы.

Показать оригинал

Перевести