Close

robots.txt и гугл

Сайт — стандартный магазин на вордпресс\вукомерц. + лендинг страница на произвольном адресе.

однако гугл стал ругаться именно на файл робота.
на почту шлет предупреждения по типу:

"На сайте http://site.ru/ выявлена новая проблема с материалами формата "Индексирование отправленных URL"

Владельцу сайта http://site.ru/

Мы выявили на Вашем сайте новые проблемы (количество: 1), связанные с материалами формата "Индексирование отправленных URL", с помощью инструментов Search Console. Это означает, что контент в формате "Индексирование отправленных URL" может быть некорректно представлен в результатах Google Поиска. Рекомендуем выполнить проверку Вашего сайта и устранить выявленную ошибку.

Ниже приведены некоторые из обнаруженных неполадок.

Проиндексировано, несмотря на блокировку в файле robots.txt"

если конкретней — ругается на дизалоу /trackback

Сам файл мне оптимизаторы делали, сказали что все так и должно быть, в чем я уже сомневаюсь.

содержание робота:

User-agent: *
Disallow: /cgi-bin
Disallow: /?
Disallow: /wp-
Disallow: /wp/
Disallow: *?s=
Disallow: *&s=
Disallow: /search/
Disallow: /author/
Disallow: /users/
Disallow: */trackback
Disallow: */feed
Disallow: */rss
Disallow: */embed
Disallow: */wlwmanifest.xml
Disallow: /xmlrpc.php
Disallow: *utm=
Disallow: *openstat=
Allow: /product-tag
Disallow: /page*
Allow: */uploads

User-agent: GoogleBot
Disallow: /cgi-bin
Disallow: /?
Disallow: /wp-
Disallow: /wp/
Disallow: *?s=
Disallow: *&s=
Disallow: /search/
Disallow: /author/
Disallow: /users/
Disallow: */trackback
Disallow: */feed
Disallow: */rss
Disallow: */embed
Disallow: */wlwmanifest.xml
Disallow: /xmlrpc.php
Disallow: *utm=
Disallow: *openstat=
Allow: /product-tag
Disallow: /page*
Allow: */uploads
Allow: /*/*.js
Allow: /*/*.css
Allow: /wp-*.png
Allow: /wp-*.jpg
Allow: /wp-*.jpeg
Allow: /wp-*.gif
Allow: /wp-admin/admin-ajax.php

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /?
Disallow: /wp-
Disallow: /wp/
Disallow: *?s=
Disallow: *&s=
Disallow: /search/
Disallow: /author/
Disallow: /users/
Disallow: */trackback
Disallow: */feed
Disallow: */rss
Disallow: */embed
Disallow: */wlwmanifest.xml
Disallow: /xmlrpc.php
Allow: /product-tag
Disallow: /page*
Allow: */uploads
Allow: /*/*.js
Allow: /*/*.css
Allow: /wp-*.png
Allow: /wp-*.jpg
Allow: /wp-*.jpeg
Allow: /wp-*.gif
Allow: /wp-admin/admin-ajax.php

Sitemap: http://site.ru/sitemap.xml
Host: site.ru

действительно ли тут все верно?

Источник

Добавить комментарий