Google pokazuje wynik mimo noindex nofollow

[okazwłoka]

Dałem meta noindex,nofollow , a mimo to strona zaczęła się pojawiać wynikach wyszukiwania (nowa strona, wcześniej nie indeksowana) googla. Jako tytuł adres strony, a w opisie jest:

"Opis tego wyniku jest niedostępny z powodu robots.txt".

Jakiś błąd w googlu czy normalka?

[Robbieriviera]

Normalka

[mwrona]

Normalka

[okazwłoka]

Dzięki Cza było ankietę zrobić

[websign]

Też widziałem trochę takich stron. Pytanie czy to niełamanie prawa, skoro właściciel wyraźnie zaznacza że nie chce żeby strona się gdzieś pokazywała, a Google postanawia nie tylko chodzić po stronie to jeszcze wyświetlać w wyszukiwarce

[Beerbant]

Pytanie czy to niełamanie prawa

Nie sądzę, przed jakimś czasem jeszcze pokazywali w serpach nawet site strony pomimo "no index", teraz pokazują tylko informacje, że "opis jest niedostępny". Jedynym punktem zaczepienia byłby sam fakt pokazywania istnienia strony pomimo domniemanej intencji nie pokazywania w google

[Lexy]

"Opis tego wyniku jest niedostępny z powodu robots.txt".

Jeśli zablokowałeś robotom dostęp do podstron z poziomu pliku robots.txt, to nie zobaczą one w ogóle wpisu w metatagach, bo się do nich nie dostaną. Dlatego takie podstrony mogą wyświetlać się w indeksie, ale właśnie z takim komunikatem.

Możesz albo wyindeksować podstrony z poziomu narzędzi dla webmasterów (ale wtedy w przypadku wykrycia nowych linków do nich, Google może je ponownie zaindeksować), albo usunąć blokadę w robotsach i zostawić noindex.

Głównym problemem jest to, że nie można jednocześnie zakazać dostępu do strony, ale także zakazać jej indeksacji. To jest dopiero paranoja.

[Grey Ronin]

Z blokowaniem robotów jest zawsze pewien kłopot. Dodam że najpewniejsza metoda to hasło w .htaccess https://httpd.apache.org/docs/2.0/howto/auth.html .

[wspolczynnik]

Jeśli zablokowałeś robotom dostęp do podstron z poziomu pliku robots.txt, to nie zobaczą one w ogóle wpisu w metatagach, bo się do nich nie dostaną. Dlatego takie podstrony mogą wyświetlać się w indeksie, ale właśnie z takim komunikatem.

Potwierdzam. Tak samo jest z 404, przekierowaniami, canonicalami... Jeżeli blokujesz zaindeksowane już adresy poprzez robots.txt to żadna ze zmian na tych podstronach nie będzie możliwa do odnotowania przez roboty.

[okazwłoka]

Wszystko byłoby pięknie, gdy tam był jakikolwiek plik robots.txt...

To jest dopiero paranoja