Robots.txt

Кто просматривает этот контент: "Тема" (Всего пользователей: 0; Гостей: 1)

Юля

Житель форума
Форумчанин
Регистрация
19.01.2017
Сообщения
109
Репутация
20
#1
Здравствуйте, технические специалисты! Такой вопрос:
Почему данные robots.txt показываются, когда ввожу : https://secsta0.blogspot.com/robots.txt :
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://secsta0.blogspot.com/sitemap.xml


В панели управления у меня он отключен:) Напишите мне правильный, если кто понимает, думаю, что соображаете, если уж такой интеллектуально серьезный сайт. Да, я проверяла в панели управления никаких записей нет. Спасибо заранее!
 

Inspiration

Житель форума
Форумчанин
Регистрация
29.09.2018
Сообщения
18
Репутация
5
#2
Здравствуйте, технические специалисты! Такой вопрос:
Почему данные robots.txt показываются, когда ввожу : https://secsta0.blogspot.com/robots.txt :
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://secsta0.blogspot.com/sitemap.xml

В панели управления у меня он отключен:) Напишите мне правильный, если кто понимает, думаю, что соображаете, если уж такой интеллектуально серьезный сайт. Да, я проверяла в панели управления никаких записей нет. Спасибо заранее!
@Юля, здравствуйте! То, что Вы взаимодействуете с адресной строкой, тот самой, которая раскрывает структуру адресного пространства ресурса, это замечательно. Наберите в Y, G, DDG <Mediapartners-Google> и посмотрите ссылочку, возможно, методом последовательных исключений найдете ответ на свой вопрос.
 

Юля

Житель форума
Форумчанин
Регистрация
19.01.2017
Сообщения
109
Репутация
20
#3
@Юля, здравствуйте! То, что Вы взаимодействуете с адресной строкой, тот самой, которая раскрывает структуру адресного пространства ресурса, это замечательно. Наберите в Y, G, DDG <Mediapartners-Google> и посмотрите ссылочку, возможно, методом последовательных исключений найдете ответ на свой вопрос.
 

Юля

Житель форума
Форумчанин
Регистрация
19.01.2017
Сообщения
109
Репутация
20
#4
Я ввела в тело шаблона это <Mediapartners-Google> и поиск показад, что это поисковый робот adsens. Сейчас Гуля ввел некоторые изменения, видимо по умолчанию стоит этот код, но в самой панели управления есть опция отключения показа рекламы. Реклама на сайте крутится, вот только непонятно - почему показывается этот robots.txt при отсутствии включения, этот робот у меня был , я его совсем удалила:) Ладно, пока успокоюсь, а там посмотрим... Вообще то с переходом нна протокол https - cтало лучше, но пропал индекс с доменом - ru - вот такие пироги:) Спасибо Вам за участие обсуждаемой темы. Я занимаюсь музыкой и, возможно Вас что-то заинтересует, например: кто не дружит с нотами: https://secsta0.blogspot.com/2018/09/blog-post_28.html
 

X-Shar

:)
Администрация
Регистрация
03.06.2012
Сообщения
5 579
Репутация
121
#5
@Юля, у вас нормальный роботс:
Код:
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://secsta0.blogspot.com/sitemap.xml
robots.txt - В этом файле нужно задать правила, какие части у вас будут индексировать поисковики.

В данном случае у вас запрещено индексировать сайт роботу "Mediapartners-Google", остальным роботам можно.

Да вы отключили показ рекламы и робот AdSense перестанит заходить на ваш сайт и определять его содержание с целью размещения релевантных объявлений.

Также запрещено индексация /search. Но это и правильно.

Короче всё у вас нормально.)
 

Inspiration

Житель форума
Форумчанин
Регистрация
29.09.2018
Сообщения
18
Репутация
5
#6
Я ввела в тело шаблона это <Mediapartners-Google> и поиск показад, что это поисковый робот adsens. Сейчас Гуля ввел некоторые изменения, видимо по умолчанию стоит этот код, но в самой панели управления есть опция отключения показа рекламы. Реклама на сайте крутится, вот только непонятно - почему показывается этот robots.txt при отсутствии включения, этот робот у меня был , я его совсем удалила:) Ладно, пока успокоюсь, а там посмотрим... Вообще то с переходом нна протокол https - cтало лучше, но пропал индекс с доменом - ru - вот такие пироги:) Спасибо Вам за участие обсуждаемой темы. Я занимаюсь музыкой и, возможно Вас что-то заинтересует, например: кто не дружит с нотами: https://secsta0.blogspot.com/2018/09/blog-post_28.html
@Юля, добрый день! sr789, что не смог помочь. Вообще, по поводу robots.txt - гораздо лучше, когда он есть, чем наоборот.
Раз уж речь зашла о нем, то вот пример из инфогигиены для сайтосоздателей и держателей, а именно, все знают, что есть расширения htm, html, php, и т.д, а есть wbp, которое связано с CMS, и подсвечивает mediacache, разработанный Adobe и используемый в документообороте во всем мире, в Вашем robotx.txt его нет, если набрать в G site:secsta0.blogspot.com mediacache, его тоже нет, с чем Вас можно поздравить, т.к иногда, вводя такие выражения, можно смотреть внутренние документы, аналогично обычным запросам в гугле с добавлением pdf, ppt xls, doc, docs, etc. Кто дружит с нотами, у того математический склад умаcool cool С нотами не дружу, но меломан со стажем, слушаю старую добрую музыку, сейчас, например, Andy Summers - But She.
 
Последнее редактирование:

Юля

Житель форума
Форумчанин
Регистрация
19.01.2017
Сообщения
109
Репутация
20
#7
@Юля, добрый день! sr789, что не смог помочь. Вообще, по поводу robots.txt - гораздо лучше, когда он есть, чем наоборот.
Раз уж речь зашла о нем, то вот пример из инфогигиены для сайтосоздателей и держателей, а именно, все знают, что есть расширения htm, html, php, и т.д, а есть wbp, которое связано с CMS, и подсвечивает mediacache, разработанный Adobe и используемый в документообороте во всем мире, в Вашем robotx.txt его нет, если набрать в G site:secsta0.blogspot.com mediacache, его тоже нет, с чем Вас можно поздравить, т.к иногда, вводя такие выражения, можно смотреть внутренние документы, аналогично обычным запросам в гугле с добавлением pdf, ppt xls, doc, docs, etc. Кто дружит с нотами, у того математический склад умаcool cool С нотами не дружу, но меломан со стажем, слушаю старую добрую музыку, сейчас, например, Andy Summers - But She.
 

Юля

Житель форума
Форумчанин
Регистрация
19.01.2017
Сообщения
109
Репутация
20
#8
@Юля, у вас нормальный роботс:
Код:
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://secsta0.blogspot.com/sitemap.xml
robots.txt - В этом файле нужно задать правила, какие части у вас будут индексировать поисковики.

В данном случае у вас запрещено индексировать сайт роботу "Mediapartners-Google", остальным роботам можно.

Да вы отключили показ рекламы и робот AdSense перестанит заходить на ваш сайт и определять его содержание с целью размещения релевантных объявлений.

Также запрещено индексация /search. Но это и правильно.

Короче всё у вас нормально.)
Вот когда это было - (файл robots)небыло индексации сайта и я его удалила - появилась:)
 

Юля

Житель форума
Форумчанин
Регистрация
19.01.2017
Сообщения
109
Репутация
20
#9

<But She> - у него есть и сложные композиции - трудно воспринимаемые гармонии для некоторых. Меломаном быть - это не так просто - это неоплачиваемый труд, но любой труд в жизни когда-то пригождАется:).
 

Inspiration

Житель форума
Форумчанин
Регистрация
29.09.2018
Сообщения
18
Репутация
5
#10
<But She> - у него есть и сложные композиции - трудно воспринимаемые гармонии для некоторых. Меломаном быть - это не так просто - это неоплачиваемый труд, но любой труд в жизни когда-то пригождАется:).
Можно подумать, эта легкая))) А Вы где постигали азы музыковедения, Berklee College of Music или Home | Royal College of Music ?
 
Вверх