Robotok és indexelés a szerkesztőben

A Yoast SEO oldalsáv Haladó paneljén minden tartalomhoz külön beállíthatod, hogyan kezeljék a keresők. Ez a fejezet a két fő beállítást, az ezekből előálló meta robots címkéket és a hozzájuk kapcsolódó Search Console hibát írja le.

https://minta-bolt.hu/wp-admin/post.php?post=6&action=edit

A képen a panel mezői látszanak: a találatokban való megjelenítés legördülő listája, a Yes és No választó a linkek követéséhez, a Robotok beállítása (haladó) lista, az Útvonal mutató címe és a Kanonikus URL-ek mező.

Követhetik-e a keresők a linkeket az oldalon?

A Haladó panelen megadhatod, hogy a keresők követhetik-e az adott bejegyzésben vagy oldalon lévő linkeket (Yes), vagy sem (No). Az alapérték a követhetőség.

A keresők a linkeket követve fedezik fel az oldalakat, és a linkekből értik meg az oldalad szerkezetét is, ezért a linkek fontosak a rangsoroláshoz. Mégis előfordul, hogy érdemes tiltani a követésüket. Kérdezd meg magadtól:

• Megbízható minden link az oldalon? Ha a tartalom olyan felhasználói tartalmat is tartalmaz, amelyet nem te ellenőrzöl, érdemes lehet letiltani a követést.
• Értékesek a linkek? Egyes linkek, például a belépési vagy admin oldalakra mutatók, SEO-értéket nem adnak. Ezeket jobb nem követtetni.
• Van fizetett link az oldalon? Ha szponzorált link van a tartalomban, és nem akarod, hogy a keresők összekössék az oldaladat a hivatkozott oldallal, tiltsd a követést.

Egyes linkeket külön is beállíthatsz, a link attribútumainak módosításával.

Miért írja ki a Yoast SEO az „index, follow” értéket?

Ha a találatokban való megjelenítést és a linkkövetést is engedélyezed (ez az alapérték), a Yoast SEO az oldal <head> részében ilyen meta robots címkéket ír ki:

<meta name="robots" content="index, follow" />
<meta name="googlebot" content="index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1" />
<meta name="bingbot" content="index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1" />

Az „index, follow” az alapértelmezett viselkedés, mégis kiírja, mert a Google és a Bing megváltoztatta a robotutasítások kezelését. A mai működésük miatt van értelme az alapértékeket is kiírni.

Minden nyilvános oldalon három címke jelenik meg, ilyen szerkezettel:

<meta name="robots" content="{{értékek}}" />
<meta name="googlebot" content="{{értékek}}, max-snippet:-1, max-image-preview:large, max-video-preview:-1" />
<meta name="bingbot" content="{{értékek}}, max-snippet:-1, max-image-preview:large, max-video-preview:-1" />

Search Console hiba: „Submitted URL marked noindex”

Ez a Google Search Console hibaüzenete. Azt jelenti, hogy az oldal szerepel az oldaltérképen, a Google megpróbálta indexelni, de valami megakadályozta. Ez lehet egy noindex meta címke az oldal forráskódjában, vagy egy X-Robots-Tag HTTP-fejléc. Az oldal ilyenkor nem jelenik meg a keresési találatokban.

Ha indexelni akarod az oldalt

Vagy töröld a meta címkét, vagy módosítsd az X-Robots-Tag fejlécet:

• A meta címke törlése. A Yoast SEO-val ez egyszerű: a Haladó panelen engedélyezd az oldal megjelenítését a keresési találatokban. A címkét az oldal forráskódjában a <meta name="robots" content="noindex"> szövegre keresve találod meg.
• Az X-Robots-Tag módosítása. Ellenőrizd a HTTP-fejléceket noindex, noarchive vagy más tiltó értékre, például X-Robots-Tag: noindex. Az Apache-alapú szervereken ezt a .htaccess és a httpd.conf fájlban állíthatod.

Ha nem akarod indexeltetni az oldalt

Vedd ki az URL-t az oldaltérképből. A Google a következő látogatáskor észreveszi a változást, vagy küldd be újra a módosított oldaltérképet. Ellenőrizd a Search Console Oldaltérképek jelentését is, és töröld azokat az oldaltérképeket, amelyek tartalmazzák az oldal URL-jét. Győződj meg arról is, hogy a robots.txt fájlban felsorolt oldaltérképek között nincs ilyen.

Újraindexeltetés kérése

A hiba megoldása után az URL-ellenőrző eszközzel a Search Consoleban ellenőrizheted, tényleg eltűnt-e a hiba. Ha a noindex utasítás már nincs ott, az Indexelés kérése gombbal kérheted az oldal újraindexelését.