Publish your project for free and start receiving offers from freelance contractors in serveral minutes after publication!

Создать robots.txt

closed without completion


Здравствуйте нужно создать правильный robots.txt.Нужно запретить индексацию поисковыми ботами гугла и яндекса через фильтры сайта , дело в том что последнее время поисковые боты ложат сайт своими очень частыми посещениями из-за чего сайт работает очень  туго.Рассмотрю предложения ,вся информация по запросу.


Make a proposal!

The client doesn't want to make prepayment? Offer him to make a payment via Safe to avoid possible fraud.

  1. 1 day200 ₴
    Александр Невский
     1375   39   2

    Да, сделаю, перекроем кислород, кому надо

    Ukraine Kyiv | 30 December 2015 |
  2.  freelancer isn't working in the service any longer
  3.  freelancer isn't working in the service any longer
  4. proposal concealed by freelancer
  5. 1 day200 ₴
    Богдан Горецький
     586  verified   9   2

    пишите для уточнения деталей(сайт, фтп)

    Ukraine Kolomyya | 30 December 2015 |
  6. 1 day10 $
    Борис Лурга
     237 

    Здравствуйте!

    Могу помочь качественно развивать Ваш проект от 10уе

    Мои преимущества:
    10 лет опыта быстрой и качественной работы с:
    - OOP PHP;
    - MySOL;
    - JavaScript;
    - CSS;
    - HTML5;
    - Ajax;
    - jQuery;
    - OpenCart;
    - Drupal;
    - SEO.

    С уважением, Борис.

    Ukraine Uzhgorod | 30 December 2015 |
  7. 1 day200 $
    Петр Гуменюк
     136   0   1

    Сделаю сейчас.
    На чем сайт?
    Как реализованы ЧПУ?

    Ukraine Kyiv | 30 December 2015 |
  8. 1 day200 ₴
    Алексей Войтович
     278   1   0

    Готов помочь

    Ukraine Dnepr | 30 December 2015 |
  9. 1 day200 ₴
    Богдан Ярчак
     650   21   0

    Зроблю за 20хв, потрібен доступ на фтп

    Ukraine Lvov | 30 December 2015 |
  10. 1 day200 ₴
    Вадим Бардаш
     1527   92   3

    Добрый день. Готов сделать. Роботы на 10 мин. Приступлю сейчас.
    Мой скайп tecj.feraless

    Ukraine Ukraine | 30 December 2015 |
  • Пропишите для ботов: Crawl-delay: 0.5 - это хватит. Если не хватит - увеличьте значение до 1 и т.д. (время в секундах).

    По поводу ,,сайт тугой,, - сделайте техно аудит - могу предоставить свои услуги (1000 грн, сроки: до 3 дней - начну 2 января)). Или воспользуйтесь услугами других специалистов.

  • Денис Бутин — project author
    Complain | 30 December 2015 |

    Здравствуйте.С технической точки все ок.Просто черезчур часто боты гугла и яндекса стали бродить по сайту из за этого большая нагрузка на бд

  • Тогда просто в файле robots.txt пропишите строчку Crawl-delay: 0.5 (робот каждые 0.5 сек будет посещать одну из ваших страниц.) ели нужно снизить еще нагрузку - ставьте 1.

  • Денис Бутин — project author
    Complain | 30 December 2015 |

    Уже прописал.Спасибо за совет.

  • Денис Бутин — project author
    Complain | 30 December 2015 |

    Ранее таких проблем с ботами небыло

  • Роман, судя по кол-ву отзывов, ты у нас  альтрумазонист. Пожелание - вместо альтруизма - побольше профессиолнализма,  директива Crawl-delay не решит проблемы сайта, скорей усугубит, хлам останестся в поисковиках, а сами поисковики ждать вашу задержку ну никак не собираются, они уйдут

  • Михаил М.
    Complain | 30 December 2015 |

    Здесь важно еще понимать, боты поисковика ли это..

  • Денис Бутин — project author
    Complain | 30 December 2015 |

    По логам сервера видно что поисковика.

  • Денис Бутин — project author
    Complain | 30 December 2015 |

    И боты лезут через фильтры сайта


  • Антон Гаптар
    Complain | 30 December 2015 |

    IP бота или ботов скажите

  • Add

Client
Денис Бутин
Ukraine Kyiv  15   0
Project published
30 December 2015
318 views
Contractor location
Ukraine Ukraine
Share