Скрипт парсинга ссылок с сайта школы на обучающие видеоролики
637 UAHЕсть портал Российской образовательной школы - https://resh.edu.ru/subject/12/5/
Отличный материал для домашнего обучения, всем нас устраивает для домашнего обучения.
Однако, из-за карантина сайт перегружен и тормозит, заниматься невозможно, и решения этого особо не предвидится, общался с техподдержкой, "денег нет, но вы держитесь".
Придется свои задачи решать самим.
Итак, необходимо собрать с портала все ссылки на видеофайлы и сложить их в таблицу mysql в формате - предмет, класс, номер урока, название урока, ссылка на видеоролик, вроде все.
Коммерческого использования для этой задачи не предполагается, это задача для наших личных целей для обучения детей на карантине, поэтому прошу не загибать цены.
Для примера прямая ссылка на страницу с видеоуроком - https://resh.edu.ru/subject/lesson/7711/main/234760/
Сайт тормозит, но страницы открываются "через раз", но все же открываются. Ночью нагрузка спадет, когда ученики всей России будут спать.
Отзыв заказчика о сотрудничестве с Антоном К.
Скрипт парсинга ссылок с сайта школы на обучающие видеороликиВсе хорошо, все работает, спасибо. Задача оказалась сложнее, чем ожидалась, с рядом нюансов - но кажется, мы все-таки с ней справились)
-
Сайт слишком перегружен чтобы даже посмотреть на него. Нужно выделить какой-то отдельный путь для парсера иначе парсинг может занять часы с такими задержками.
-
Странички открываются "через раз", но посмотреть можно. Скрипт хочу запустить ночью, когда ученики спят. И скачивать планирую поэтапно - сначала один предмет для старшего, потом второй для среднего и т.д.
-
Какой-то UI нужен для этого? Вы говорите что хотите делать парсинг "поэтапно".
-
Вам нужны ссылки на файл в m3u8 ? И да вам нужны все классы или какие то конкретные ?
-
M3u8 это не видеофайл, это какой то конфигурационный файл. Лучше все классы сразу собрать, скрипту же все равно, сколько страниц обходить, принцип парсинга от этого не меняется)
-
Не беритесь за эту работу. Там все видеофайлы порезаны на 3-секундные фрагменты. Доступ к файлам только по AJAX с динамично генерируемыми ключами.
Мороки там столько, что...
-
Вам необходимы ссылки на видеоролики ( https://video.resh.edu.ru/widgets/view/c395e277c325d12ac2a53ce45080458d )
или сакачанные видеофайлы?
-
Ссылки именно на видеофайлы, не на виджет плеера. Не скачанные видеофайлы, по ссылкам я их сам скачаю.
-
Вся проблема заключается в том, что из таких плееров невозможно достать ссылки на видеофайлы, поэтому я могу написать для вас скрипт, который будет скачивать видеоролики из приведённых выше ссылок.
-
В процессе парсинга возникли следующие ньюансы:
1. Присутствует некоторый процент прямых ссылок на видеофайл ( https://resh.edu.ru/uploads/lesson_extract/7260/20200319164350/OEBPS/objects/e_alge_7_15_1/5dc7bf2ce2002477581015cc.mp4 )
2. Присутствуют уроки в которых нет видео ( https://resh.edu.ru/subject/lesson/1971/main/ )
-
Актуальные фриланс-проекты в категории Веб-программирование
Добавить бегущую строчку в шапку сайта
700 UAH
https://crazybox.com.ua/uk?srsltid=AfmBOopQRUXCCmxx699n57B3eP1XmwcYxJxwPh9qV9WcVjLjS_J2pK5s вот пример как выглядит у них, нужно сделать по их подобию а на этом нужно сделать https://rollershop.com.ua/ опенкарт ocStore 3.0.3.7. и что бы была возможность редатировать текст… PHP, Веб-программирование ∙ 35 минут назад ∙ 35 ставок |
Сайт похожий на https://boom-inc.ruСоздать современный одностраничный сайт (Landing Page) для продукта PowerShot — протеинового напитка в двухкамерной упаковке. Стиль сайта: Минимализм Тёмный фон Неоновые фиолетово-бирюзовые акценты Стиль похож на BoomShot Акцент на инновационность продукта Главный экран… Интернет-магазины и электронная коммерция, Веб-программирование ∙ 40 минут назад ∙ 29 ставок |
Верстка сйта под WordPressДобрый день, нужна верстка - качественная, резиновая, респонсив. Landing Page + блог Пришлите пару ваших работ из портфолио, с самой интересной версткой, с анимациями. Спасибо HTML и CSS верстка, Веб-программирование ∙ 2 часа 52 минуты назад ∙ 64 ставки |
Установка плагина на Shopify для кастомизации контента на разных страницахЗдравствуйте. Нужно на сайт на Shopify установить плагин для возможности добавлять и редактировать кастомный контент внизу каждой страницы категории для SEO. Нужно: 1. текстовый формат 2. Блок FAQ Либо можно это реализовать через код сайта, но чтобы это не повлияло на работу… CMS, Веб-программирование ∙ 2 часа 53 минуты назад ∙ 19 ставок |
Исправить баги в верстке на сайте OkayCMS
700 UAH
Исправить баги в выпадающих меню на сайте на OkayCMS. Баг в отображении подкатегории меню при наведении на них CMS, Веб-программирование ∙ 4 часа 2 минуты назад ∙ 33 ставки |