Bug в Google Search Console
2459 PLNИтак, что мы имеем на входе:
1) У нас есть с сайт, на котором несколько млн страниц.
2) В силу ряда причин нам регулярно приходится удалять некоторые страницы из Google, при том и из Google cache тоже.
3) Удалять можно (и нужно) через https://search.google.com/search-console/removals
4) Удалять можно как от администратора сайта так и простому пользователю (не хочу вдаваться в подробности, но если страница на сайте уже удалена то и простой смертный может это сделать)
5) Нам нужно удаление от администратора - оно работает быстрее и с некоторыми нужными нам параметрами
Что мы имеем на выходе:
1) Когда (деревья были большими) все только начиналось - система работала нормально.
2) Сейчас у нас уже накопилось более 40к удаленных страниц
3) Сейчас Google (красавчики-разработчики) подгружают ВСЮ историю (таблично) удалений сразу на страницу, да сделан пейджинг - но ВСЕ данные УЖЕ в DOM'e
4) При таком раскладе страница сразу весит в памяти около 1.4GB (при этом GPU тоже весит примерно гиг)
5) При добавлении 5-10 страниц страница раздувается до 10-20GB и если комп слабенький - то все это дело слетает, да даже и на тазике с 64гб оперативки выглядит это все печально. Лично у меня есть подозрение что они там где-то повторно все вгружают в память не перетирая то что было
6) Загрузка CPU до 400% в такие моменты, это на мощном тазике. Более чем
Что нам нужно:
Разобраться на нашей стороне что можно вырезать на лету в этой всей богодельне так чтобы страница не раздувалась и можно было хоть как-то работать. Может быть найти утечку и постараться ее через консоль обрезать - тоже подойдет
Может какой-то скрипт, который который будет удалять js переменные, кто его знает что там Google строит.
Скорее всего они не предполагали что будет такое кол-во удалений и на больших объемах не тестировали
Что уже пробовали и что не надо предлагать:
1) Работать через removal API (у нас сайт не подходит под критерии)
2) Создавать sitemap страниц, которые нужно удалить (это не наш метод, скорость response не подходит)
Особенности:
Работа в данном направлении связана с админским доступом к GSC так что скорее всего прийдется работать со мной в связке, то есть либо я шарю экран и вы мне говорите что делать, толи еще какой-то такой совместный кодинг (я слава Богу более менее в программировании, так что backspace найду)
Załączniki 2
-
А есть ли возможность сохранить страницу из браузера и прислать в архиве?
-
Возможно через екстеншн получиться что-то сделать. Надо чтобы опытные люди отписались
-
Aktualne zlecenia dla freelancerów w kategorii Javascript & Typescript
Full-stack rozwój — Amazon PPC Dashboard (Etap 1)Potrzebny programista full-stack z doświadczeniem w pracy z Amazon API do realizacji Etapu 1 wewnętrznego dashboardu PPC. Projekt realny, dane żywe, wszystko gotowe do startu. Prototyp frontendu (5 stron, React + TypeScript): CO JUŻ GOTOWE — Prototyp frontendu na React 18 +… Javascript & Typescript, Programowanie stron internetowych ∙ 1 godzina 6 minut temu ∙ 6 ofert |
Opracowanie strony internetowej do tworzenia fotoksiążek i ram fotowychCel projektuNależy opracować nowoczesną stronę internetową do zamawiania fotoksiążek, ram fotowych i innych spersonalizowanych produktów fotograficznych.Głównym celem projektu jest umożliwienie klientowi samodzielnego stworzenia gotowego projektu produktu bez udziału projektanta… Javascript & Typescript, Programowanie stron internetowych ∙ 1 dzień 17 godzin temu ∙ 88 ofert |
Full-stack rozwójPotrzebny jest programista full-stack, który jest dostępny do pracy i nie chce od razu wzbogacić się na tym projekcie. To jest moja strona testowa: readyhome.ge prototyp, który chcę stworzyć (nie mam na myśli designu). W stopce w języku rosyjskim, wypełnij ankietę i przejdź… Javascript & Typescript, Programowanie stron internetowych ∙ 2 dni 5 godzin temu ∙ 79 ofert |
Zespół do samodzielnie stworzonej platformy rynkowej usług pogrzebowych.Poszukujemy zespołu do uruchomienia i rozwoju autorskiej krajowej platformy rynkowej usług pogrzebowych. Od razu: nie szukamy pojedynczych osób, juniorów ani "zbieraczy stron". Potrzebny jest silny zespół produktowy na poziomie middle+/senior z rzeczywistymi przypadkami… Javascript & Typescript, Programowanie stron internetowych ∙ 2 dni 11 godzin temu ∙ 25 ofert |
Dopracowanie istniejącego projektu Next.js/Supabase: oferty, CRM, analityka, czat AIIstnieje działający projekt WatchGenius — platforma analityczna luksusowych zegarków z katalogiem modeli, analizą cen, zewnętrznymi ofertami, formularzami zgłoszeniowymi i czatem AI. Projekt został już częściowo opracowany. Potrzebny jest doświadczony programista full-stack,… Javascript & Typescript, Programowanie stron internetowych ∙ 4 dni 13 godzin temu ∙ 54 oferty |