Andrei Kozlov
Рейтинг
Резюме
Программирую на Python, предоставляю услуги по следующим направлениям: парсинг, сбор данных, анализ данных, написание различных скриптов...
Имею высшее техническое образование (инженер по автоматизации). Дипломную работу защищал по теме стохастических алгоритмов глобальной оптимизации.
Навыки и умения
Программирование
Услуги
Портфолио
-
1274 UAH Web-приложение под Prophet от Facebook
PythonWeb-приложение на #django2 для прогнозирования временных рядов (на примере колебания котировок валютной пары UAH/USD) с помощью Prophet от Facebook. В основе проекта лежал
Jupyter notebook, код из которого требовалось адаптировать под нужды заказчика. Дополнительно были реализованы загрузка таблицы с данными для тренировки прогнозной модели и база данных, содержащая добавляемые даты праздников, необходимые для корректировки этой модели.
-
Парсер OLX
Парсинг данныхБыстрый многопоточный парсер объявлений с доски #olx с графическим интерфейсом и поддержкой прокси. Средняя скорость работы программы: 1000 объявлений с телефонами за 1,5 минуты, без дублей. #парсер предоставляет возможность поиска по ключевому слову и поиска по категориям с параметрами. Функцию извлечения номеров мобильных телефонов, несмотря на то, что она является довольно востребованной, тем, кому она не нужна, можно отключить, что ещё больше сэкономит время. Кроме того, есть функции извлечения только последних N штук объявлений и остановки парсера в любой момент. Данные сохраняются в excel-файл, в который записываются следующие поля: id (номер объявления), url (ссылка на объявление), Обновлено (дата и время последнего обновления объявления), Заголовок, Описание, Бизнес (тип аккаунта пользователя), Имя, Телефон, Город, Регион, Цена, Валюта, и другие параметры, зависящие от категории объявлений, такие как: Состояние, Подкатегории, Размер, Типы мебели и т.д.
-
4670 UAH Парсеры объявлений и система мониторинга
PythonДля трёх испанских досок автомобильных объявлений были написаны #парсеры объявлений с записью данных в спроектированную под это задание базу #MySQL5. Была реализована и веб-система мониторинга работы парсеров на #django, выводящая в админке аналитику по собранным данным. К сожалению, заказчик пока оплатил только часть работ, но обещает погасить долг. Работайте через сейф)
-
1274 UAH Парсер максимальных коэффициентов букмекера
Парсинг данныхПарсер в удобном формате сохраняет максимальные коэффициенты на футбольные матчи выбранных пользователем лиг (как по отдельности, так и списком из файла), в выбранной им букмекерской конторе, основываясь на данных вилочного сервиса AllBestBets. Заказчику были нужны лишь определённые рынки, поэтому данные отфильтровывались, а затем сортировались по дате. Реализована возможность перехода по ссылке на конкретный матч. Парсер использует прокси, написан на #python .
-
340 UAH Парсинг интернет-магазина Salmoru
Парсинг данныхПарсинг интернет-магазина рыболовных принадлежностей Salmoru.com. Данные записываются в csv-файл. Заказчику нужны были только два категории - удилища и катушки.
-
127 UAH Парсинг справочника Санкт-Петербурга
Парсинг данных
Парсинг справочника компаний Санкт-Петербурга (org78.ru). Довольно простой оказался для парсинга сайт, но, как мне кажется, не самый информативный.
-
Парсинг автомобильных фильтров с Wixfilters.com
Парсинг данныхНаписал скрипт по парсингу #базы_данных автомобильных фильтров (http://www.wixfilters.com/Lookup/Applications.aspx). Программа последовательно выбирает все опции (если есть опция типа "показать всё", то выбирает только её) и записывает данные в csv-таблицу. Ставку на проект делать не стал, т.к. хотел убедиться, что всё работает, но пока отлаживал скрипт, заказчик набрал команду из человек 20, которые собрали для него эту базу вручную...
-
300 UAH Парсер заявок с Exkavator.ru
Парсинг данныхСкрип по парсингу заявок на сайте https://exkavator.ru/exchange/trade/main.html. Заявки с контактными данными сохраняются в csv-таблицу.
-
300 UAH Парсинг мэйлов ICO-компаний
Парсинг данныхПарсинг мэйлов компаний из списка #ico -проектов на сайте https://icobench.com/icos. Парсер проходит по всем страницам из списка, переходит на сайт компании и собирает с главной страницы все #email -ы, сохраняя их в #csv -файлик.
-
1274 UAH Парсер ОКАТО
Python
#парсер внутригородских районов ОКАТО по данным из Росстата. Заказчику был нужен особый алгоритм выборки данных, сравнения с файлом, содержащим список регулярных выражений, применяемых на корпоративном сайте, и записью итогового файла с таблицей внутригородских кодов ОКАТО и таблицами результатов сравнения, с учётом исключений (которые записаны в отдельном файле). В общем логика сложная, заказ выполнялся поэтапно с оплатой за каждый этап. Высокая скорость работы парсера была достигнута использованием библиотеки #pandas и векторным операциям.
-
300 UAH Парсинг email гидов
Парсинг данныхПарсинг мэйлов гидов с сайта Tonkosti.ru – страна, город, имя, мэйл и ссылка на страничку на сайте. В итоге получился 1201 mail (гид).
-
340 UAH Парсер интернет-магазина Technomarin
Парсинг данных#парсер интернет-магазина запчастей Technomarin.ru на #Python3 . Для заказчика данного парсера я также написал скрипты и для других интернет-магазинов по тематике товаров для охоты и рыбалки: Moreman и Optic4u.
-
1274 UAH Парсинг избирателей Киргизии
Парсинг данныхОдин из моих крупных заказов – #парсинг избирателей Кыргызстана с сайта киргизской ЦИК (https://shailoo.srs.kg/view/public/tik_list_public.xhtml): ФИО, избирательный участок, избирательный округ. Около 3 миллионов записей. Заказчику нужно было предоставить данные одним csv-файлом как можно быстрее, поэтому пришлось запускать копии скрипта, уже являвшегося многопоточным, на разных хостингах, а затем объединять данные. Дело осложнялось тем, что сервер ЦИК постоянно «падал» (из-за обновлений данных и технических работ). Для этого же заказчика позднее по другому заданию был написал #парсер внутригородских районов ОКАТО.
-
340 UAH Парсер интернет-магазина Moreman
Парсинг данныхМногопоточный #парсер интернет-магазина морских товаров Moreman на #Python3 (в среднем, 11 500 товаров). Для заказчика данного парсера я также написал скрипты и для других интернет-магазинов по тематике товаров для охоты и рыбалки: Optic4u и Technomarin (за 800 р. за каждый).
-
340 UAH Парсер интернет-магазина Optic4u
Парсинг данных#парсер интернет-магазина оптики для охоты Optic4u.ru на #Python3 . Для заказчика данного парсера я также написал скрипты и для других интернет-магазинов по тематике товаров для охоты и рыбалки: Moreman и Technomarin.
Отзывы и комплименты о выполненных проектах 5
7 января 2019
1274 UAH
Интерфейс
Безумно благодарен за сотрудничество. Вы действительно мастер своего дело. Все выполнено качественно и все поправки учтены.
![]()
28 декабря 2018
212 UAH
Программирование Python 3.7 Задачи
Все отлично! Выполнено быстро и качественно. Советую с данным человеком работать!
![]()
28 декабря 2018
149 UAH
Задание прог.
Все супер. Задачка зашла. думаю еще сработаемся! Спасибо большое
![]()
27 декабря 2018
149 UAH
Задание прог.
зашло. все отлично. можно работать, думаю будем дальше)
![]()
11 декабря 2018
1274 UAH
написать 3 парсера на Питоне
Отличный исполнитель! Всегда на связи, работа выполнена срок! Рекомендую!
Активность
| Последние ставки 10 | Бюджет | Добавлена | Сроки | Ставка | |
|---|---|---|---|---|---|
|
Алгоритмы и структуры данных на python
1350 UAH
|
|||||
|
Парсинг номеров Родителей
200 UAH
|
|||||
|
Небольшие доработки. Django + Angular 6(не обязательно) + Postgresql
127 UAH
|
|||||
|
Парсинг ОЛХ
450 UAH
|
|||||
|
Парсинг контактов с сайта
212 UAH
|
|||||
|
Интерфейс
1274 UAH
|
|||||
|
Программирование Python 3.7 Задачи
212 UAH
|
|||||
|
Задание прог.
149 UAH
|
|||||
|
Задание прог.
149 UAH
|
|||||
|
Парсинг ОЛХ
400 UAH
|