Похожие записи:
- Система управления подписчиками на рассылку новостей в CodeIgniter 3
- Центр обновления Windows: мы не можем завершить обновление. Попробуйте перезагрузить устройство, и мы попробуем еще раз. Код ошибки: (0x8007000e)
- Почему время ожидания ping истекает через равные промежутки времени?
- Настройка переменных при изменении атрибута статуса моей модели Order Laravel при обновленном событии в наблюдателе
- Функциональность подписки на новостную рассылку в Codeigniter 3
Sandra2019
доступ к запрошенному URL-адресу по какой-то причине запрещен. Ввиду чего системе не удаётся получить данные о мета-тегах и заголовках. что можно с этим сделать? по какой причине это происходит?
приклыдваю robots txt
User-agent: *
Disallow: /api
Disallow: /stats
Disallow: /links
Disallow: /demands
Disallow: /*products_region=
Disallow: /*xls
Disallow: /*request
Disallow: /go?to=
Disallow: /dashboard
Disallow: /predl?*q=*
Disallow: /about/terms
Disallow: */ajax
Disallow: /*preview=
Disallow: /*q=
Disallow: /*imageview
Disallow: /users
Disallow: *openstat=
Disallow: *yclid=
Disallow: *gclid=
Disallow: *utm_campaign=
Disallow: *utm_source=
Disallow: *utm_medium=
Disallow: */order
Disallow: /toolbar
Disallow: *open_orders_chat
Disallow: *intruder
Disallow: *?order=
Disallow: *?ya_openstat=
Disallow: *?print=
Disallow: *?filter=
Disallow: *?set_limit=
Disallow: *?regions=
Disallow: *?k50id=
Disallow: *?synonym_path=
Disallow: *price_min
Disallow: *price_max
User-agent: bingbot
Disallow: /api
Disallow: /stats
Disallow: /links
Disallow: /demands
Disallow: /*products_region=
Disallow: /*xls
Disallow: /*request
Disallow: /go?to=
Disallow: /dashboard
Disallow: /predl?*q=*
Disallow: /about/terms
Disallow: */ajax
Disallow: /*preview=
Disallow: /*q=
Disallow: /*imageview
Disallow: /users
Disallow: *openstat=
Disallow: *yclid=
Disallow: *gclid=
Disallow: *utm_campaign=
Disallow: *utm_source=
Disallow: *utm_medium=
Disallow: */order
Disallow: /toolbar
Disallow: *open_orders_chat
Disallow: *intruder
Disallow: *?order=
Disallow: *?ya_openstat=
Disallow: *?print=
Disallow: *?filter=
Disallow: *?set_limit=
Disallow: *?regions=
Disallow: *?k50id=
Disallow: *?synonym_path=
Disallow: *price_min
Disallow: *price_max
Crawl-delay: 10
User-agent: YandexBot
Disallow: /api
Disallow: /stats
Disallow: /links
Disallow: /demands
Disallow: /*products_region=
Disallow: /*xls
Disallow: /*request
Disallow: /go?to=
Disallow: /dashboard
Disallow: /predl?*q=*
Disallow: /about/terms
Disallow: */ajax
Disallow: /*preview=
Disallow: /*q=
Disallow: /*imageview
Disallow: /users
Disallow: */order
Disallow: /toolbar
Disallow: *open_orders_chat
Disallow: *intruder
Disallow: *?order=
Disallow: *?ya_openstat=
Disallow: *?print=
Disallow: *?filter=
Disallow: *?set_limit=
Disallow: *?regions=
Disallow: *?k50id=
Disallow: *?synonym_path=
Disallow: *price_min
Disallow: *price_max
Clean-param: gclid&yclid&aw_openstat&ay_openstat&_openstat&utm_campaign&utm_medium&utm_source
User-agent: heritrix
Disallow: /
Host: http://www.ufa-opalubka.ru
Sitemap: http://www.ufa-opalubka.ru/sitemap.xml
Sitealert
приклыдваю robots txt
Можешь ещё подорожник приложить. Эффект будет такой же.
angel57
А сама страница открывается?
Sandra2019
Можешь ещё подорожник приложить. Эффект будет такой же.
Да хоть корень Имбиря готова приложить — объясните где кроется запрет
angel57
https://webmaster.yandex.ru/tools/robotstxt/
Тут можно проверить заблокирована ли страница роботсом и какой директивой.
Хост — эту директиву можно убрать уже как 2 года не поддерживается, тем более все равно у вас она неправильно написана))
Sandra2019
А сама страница открывается?
да, открывается сайт.
Sitealert
Да хоть корень Имбиря готова приложить — объясните где кроется запрет
Кофейной гущи не успел заварить, гадать не на чем.
Какой адрес не работает?
Sandra2019
https://webmaster.yandex.ru/tools/robotstxt/
Тут можно проверить заблокирована ли страница роботсом и какой директивой.
Хост — эту директиву можно убрать уже как 2 года не поддерживается, тем более все равно у вас она неправильно написана))
не поняла, по ссылке идет просто анализ роботс — а где именно «собака зарыта» чтобы указать программистам что изменить -не могу понять.
angel57
Потом надо ввести проблемный урл и покажет, закрыт или нет
Sitealert
где именно «собака зарыта» чтобы указать программистам что изменить -не могу понять.
Программисты смогут, если с ними поговорите по существу, а не загадками, как в этой теме.
angel57
https://webliberty.ru/wp-content/uploads/2010/10/Analiz-robots.txt-v-YAndeks.png