Создать robots.txt
Здравствуйте нужно создать правильный robots.txt.Нужно запретить индексацию поисковыми ботами гугла и яндекса через фильтры сайта , дело в том что последнее время поисковые боты ложат сайт своими очень частыми посещениями из-за чего сайт работает очень туго.Рассмотрю предложения ,вся информация по запросу.
-
248 21 0 Зроблю за 20хв, потрібен доступ на фтп
-
605 12 0 1 Готов помочь
-
716 4 0 Здравствуйте!
Могу помочь качественно развивать Ваш проект от 10уе
Мои преимущества:
10 лет опыта быстрой и качественной работы с:
- OOP PHP;
- MySOL;
- JavaScript;
… - CSS;
- HTML5;
- Ajax;
- jQuery;
- OpenCart;
- Drupal;
- SEO.
С уважением, Борис.
-

Пропишите для ботов: Crawl-delay: 0.5 - это хватит. Если не хватит - увеличьте значение до 1 и т.д. (время в секундах).
По поводу ,,сайт тугой,, - сделайте техно аудит - могу предоставить свои услуги (1000 грн, сроки: до 3 дней - начну 2 января)). Или воспользуйтесь услугами других специалистов.
-
Здравствуйте.С технической точки все ок.Просто черезчур часто боты гугла и яндекса стали бродить по сайту из за этого большая нагрузка на бд
-
Уже прописал.Спасибо за совет.
-
Ранее таких проблем с ботами небыло
-

Роман, судя по кол-ву отзывов, ты у нас альтрумазонист. Пожелание - вместо альтруизма - побольше профессиолнализма, директива Crawl-delay не решит проблемы сайта, скорей усугубит, хлам останестся в поисковиках, а сами поисковики ждать вашу задержку ну никак не собираются, они уйдут
-
По логам сервера видно что поисковика.
-
И боты лезут через фильтры сайта
-
Актуальные фриланс-проекты в категории Веб-программирование
Настройка GTM-аналитики для GetCourse с привязкой рекламных данных к заказуНеобходимо настроить GTM-аналитику для образовательной платформы на GetCourse. Задача: через Google Tag Manager собирать рекламные данные пользователя из URL и cookie и привязывать их к конкретному пользователю/заказу в GetCourse. Необходимо собирать и сохранять такие данные:… Веб-программирование ∙ 10 часов 49 минут назад ∙ 13 ставок |
Подготовить сайт в запуску wp+woo
1288 UAH
Приветствую. Ищу специалиста по wp+woocommerce. Нужно подготовить сайт к запуску. Проверить работу платежной системы, регистрацию, категории, поправить картинки товаров и описание, правильные чпу. На сайте менее 30 товаров, но нужно будет создать новые категории и подкатегории с… Веб-программирование ∙ 13 часов 34 минуты назад ∙ 39 ставок |
Google Tag Manager (server-side) через Stape
1000 UAH
Нужен специалист с опытом настройки Google Tag Manager (server-side) через Stape. Цель —проверить текущуюнастройку и ошибкув в цепочке стейп- шопифай, таг менеджеры. Посмотреть в чем ошибка и исправить ее. Надо чтобы отслеживание проходило на покупки, корзина, просмотры и т.д.… Веб-программирование, Контекстная реклама ∙ 16 часов 6 минут назад ∙ 11 ставок |
Нужно достать POST / GET / PUT запросы с мобильного приложения TikTok срочноПо сути. Нужно достать POST / GET / PUT запросы с мобильного приложения TikTok Даже по суи можно до конца не реверсить ничего такого ибо подписи есть в интернете и т.д. Но было бы тоже супер Вся авторизация (Отправка данных/подтверждение по почте и ввод кода если… Веб-программирование, Десктопные приложения ∙ 22 часа 12 минут назад ∙ 18 ставок |
Функция поиска товаров по изображениюНеобходимо разработать и интегрировать на сайт функциюпоиска товаров по изображению.Что нужно реализоватьКнопка«Поиск по фото»на сайте.Загрузка изображения пользователем: JPG.Поиск визуально похожих товаров в каталоге.Вывод результатов в виде стандартных карточек товаров: фото,… PHP, Веб-программирование ∙ 22 часа 49 минут назад ∙ 40 ставок |