С сайтом opensea.io не всё так просто, как может показаться на первый взгляд. Требуемые данные в html-коде отсутствуют, даже если полностью отрендерить весь javascript. То есть, даже такой универсальный инструмент как Selenium сам по себе оказывается бесполезным (не говоря уже о requests, bs4 и т.п.). У сайта есть API, посредством которых передаются данные по продажам, но доступ к ним ограничен (у меня не получилось — сервер постоянно выдаёт ошибку 403). Попытка подключить прокси-сервер, который бы отлавливал все HTTP-запросы для их последующего анализа, тоже не удалась. Похоже, сайт «понимает», что запросы перенаправляются на прокси, и блокирует доступ.
Однако, можно просмотреть все необходимые данные через панель разработчика браузера (WebTools). Значит, в принципе, задача решаема. Например, можно написать расширение для браузера, которое будет фильтровать запросы, возвращающие XHR-данные и сохранять то, что нам нужно. А непосредственно формат данных, возвращаемый по API, довольно простой.
