Bug в Google Search Console
677 USDИтак, что мы имеем на входе:
1) У нас есть с сайт, на котором несколько млн страниц.
2) В силу ряда причин нам регулярно приходится удалять некоторые страницы из Google, при том и из Google cache тоже.
3) Удалять можно (и нужно) через https://search.google.com/search-console/removals
4) Удалять можно как от администратора сайта так и простому пользователю (не хочу вдаваться в подробности, но если страница на сайте уже удалена то и простой смертный может это сделать)
5) Нам нужно удаление от администратора - оно работает быстрее и с некоторыми нужными нам параметрами
Что мы имеем на выходе:
1) Когда (деревья были большими) все только начиналось - система работала нормально.
2) Сейчас у нас уже накопилось более 40к удаленных страниц
3) Сейчас Google (красавчики-разработчики) подгружают ВСЮ историю (таблично) удалений сразу на страницу, да сделан пейджинг - но ВСЕ данные УЖЕ в DOM'e
4) При таком раскладе страница сразу весит в памяти около 1.4GB (при этом GPU тоже весит примерно гиг)
5) При добавлении 5-10 страниц страница раздувается до 10-20GB и если комп слабенький - то все это дело слетает, да даже и на тазике с 64гб оперативки выглядит это все печально. Лично у меня есть подозрение что они там где-то повторно все вгружают в память не перетирая то что было
6) Загрузка CPU до 400% в такие моменты, это на мощном тазике. Более чем
Что нам нужно:
Разобраться на нашей стороне что можно вырезать на лету в этой всей богодельне так чтобы страница не раздувалась и можно было хоть как-то работать. Может быть найти утечку и постараться ее через консоль обрезать - тоже подойдет
Может какой-то скрипт, который который будет удалять js переменные, кто его знает что там Google строит.
Скорее всего они не предполагали что будет такое кол-во удалений и на больших объемах не тестировали
Что уже пробовали и что не надо предлагать:
1) Работать через removal API (у нас сайт не подходит под критерии)
2) Создавать sitemap страниц, которые нужно удалить (это не наш метод, скорость response не подходит)
Особенности:
Работа в данном направлении связана с админским доступом к GSC так что скорее всего прийдется работать со мной в связке, то есть либо я шарю экран и вы мне говорите что делать, толи еще какой-то такой совместный кодинг (я слава Богу более менее в программировании, так что backspace найду)
Applications 2
-
А есть ли возможность сохранить страницу из браузера и прислать в архиве?
-
Возможно через екстеншн получиться что-то сделать. Надо чтобы опытные люди отписались
-
Current freelance projects in the category Javascript and Typescript
Full-stack development — Amazon PPC Dashboard (Stage 1)Need a full-stack developer with experience working with Amazon API to implement Stage 1 of the internal PPC dashboard. The project is real, the data is live, everything is ready to start. Frontend prototype (5 pages, React + TypeScript): WHAT IS ALREADY READY — Frontend… Javascript and Typescript, Web Programming ∙ 1 day 5 hours back ∙ 25 proposals |
Development of a photo book and photo frame constructor websiteProject Goal A modern website needs to be developed for ordering photo books, photo frames, and other personalized photo products. The main task of the project is to provide the client with the ability to independently create a ready-made layout of the product directly on the… Javascript and Typescript, Web Programming ∙ 2 days 21 hours back ∙ 94 proposals |
Team for a custom marketplace of funeral services.We are looking for a team to launch and develop a custom national marketplace for funeral services. Right away: we are not looking for solo freelancers, juniors, or "website builders." We need a strong product team at the middle+/senior level with real cases in… Javascript and Typescript, Web Programming ∙ 3 days 15 hours back ∙ 26 proposals |
Improvement of the existing Next.js/Supabase project: offers, CRM, analytics, AI chatThere is an active project WatchGenius — a luxury watch analytics platform with a catalog of models, price analytics, external offers, application forms, and an AI chat. The project has already been partially developed. We need not a website from scratch, but an experienced… Javascript and Typescript, Web Programming ∙ 5 days 17 hours back ∙ 55 proposals |
I am looking for a Senior Full-Stack Developer (Payload CMS) — migration of 2 websites for a hotel chain.The resort hotel network is transitioning from Webflow to its own headless stack. Two corporate websites (~140 pages in total), multi-tenant architecture — one code serves multiple hotels on different domains. The project has already started: the infrastructure is deployed,… Content Management Systems, Javascript and Typescript ∙ 9 days 14 hours back ∙ 19 proposals |