Создать robots.txt
Здравствуйте нужно создать правильный robots.txt.Нужно запретить индексацию поисковыми ботами гугла и яндекса через фильтры сайта , дело в том что последнее время поисковые боты ложат сайт своими очень частыми посещениями из-за чего сайт работает очень туго.Рассмотрю предложения ,вся информация по запросу.
-
1 day5 USD
248 21 0 1 day5 USD
Зроблю за 20хв, потрібен доступ на фтп
-
1 day5 USD
605 12 0 1 1 day5 USD
Готов помочь
-
1 day10 USD
716 4 0 1 day10 USD
Здравствуйте!
Могу помочь качественно развивать Ваш проект от 10уе
Мои преимущества:
10 лет опыта быстрой и качественной работы с:
- OOP PHP;
- MySOL;
- JavaScript;
… - CSS;
- HTML5;
- Ajax;
- jQuery;
- OpenCart;
- Drupal;
- SEO.
С уважением, Борис.
-
Пропишите для ботов: Crawl-delay: 0.5 - это хватит. Если не хватит - увеличьте значение до 1 и т.д. (время в секундах).
По поводу ,,сайт тугой,, - сделайте техно аудит - могу предоставить свои услуги (1000 грн, сроки: до 3 дней - начну 2 января)). Или воспользуйтесь услугами других специалистов.
-
Здравствуйте.С технической точки все ок.Просто черезчур часто боты гугла и яндекса стали бродить по сайту из за этого большая нагрузка на бд
-
Уже прописал.Спасибо за совет.
-
Ранее таких проблем с ботами небыло
-
Роман, судя по кол-ву отзывов, ты у нас альтрумазонист. Пожелание - вместо альтруизма - побольше профессиолнализма, директива Crawl-delay не решит проблемы сайта, скорей усугубит, хлам останестся в поисковиках, а сами поисковики ждать вашу задержку ну никак не собираются, они уйдут
-
По логам сервера видно что поисковика.
-
И боты лезут через фильтры сайта
-
Current freelance projects in the category Web Programming
Landing page for a psychologistTask. Create a "turnkey" and "launch" landing page for a psychologist with potential for expansion (adding a menu and other pages). Sequential screenshots of the desired design are in the attached files. For this specialist https://barb.ua/uk/zaporozhye/master/izubar… Web Programming ∙ 4 hours 49 minutes back ∙ 14 proposals |
Primatic - Transfer of 3 pages from Figma to WordPress (Elementor)Hello! My name is Anna, I live in Israel and run a small creative studio. I mainly work with small and medium businesses and am currently looking for a freelancer for long-term collaboration. At the moment, there is a project: we need to transfer a finished design from Figma… HTML & CSS, Web Programming ∙ 5 hours 56 minutes back ∙ 22 proposals |
Looking for a Frontend Developer (React + Tailwind) to refine the websiteHello everyone! We are looking for a skilled frontend developer to help us finish the website of a premium plastic surgery clinic. The situation is as follows: the site has been designed and built using two AIs — the logic, structure, and code were created through neural… Web Programming, Web Design ∙ 9 hours 33 minutes back ∙ 37 proposals |
Development of 2 SEO-oriented websites for selling spare parts (ATVs and special equipment)Development of Two Specialized Websites for Selling Spare PartsGeneral Information It is necessary to develop two specialized websites: Spare parts for ATVs, UTVs, SSVs, and other similar equipment. Spare parts for special equipment. Existing company website:… PHP, Web Programming ∙ 19 hours 20 minutes back ∙ 51 proposals |
Need a 1C specialist (Trade Management)
23 USD
Need a 1C specialist (Trade Management) We are looking for an experienced 1C programmer for a small integration project. We have an online store and a 1C UT configuration. It is necessary to set up data exchange between the website and 1C — so that the website can receive… System & Network Administration, Web Programming ∙ 22 hours 31 minutes back ∙ 12 proposals |
Kyiv