NovéStaviam na Claude od AnthropicAI automatizácia procesovAI v marketingu

Ako odstrániť stránku z Googlu: ktorý spôsob použiť a kedy

Stránka, ktorá sa nemá zobrazovať vo vyhľadávaní, sa dá z Googlu dostať štyrmi rôznymi spôsobmi a každý z nich rieši inú situáciu. Najčastejšia chyba je siahnuť po zákaze v súbore robots.txt, ktorý na to podľa dokumentácie nie je určený a stránku v indexe pokojne nechá. Tento článok prechádza všetky spôsoby, ktoré Google opisuje: nástroj na odstraňovanie adries pre naliehavé prípady, tag noindex, zmazanie obsahu a ochranu heslom. Ku každému je uvedené, ako rýchlo zaberie, ako dlho vydrží a čo si pri ňom treba overiť, aby sa stránka o pol roka nevrátila.

1. Najprv rozhodnite, čo presne chcete odstrániť

Pod jednou vetou „chcem to dostať z Googlu“ sa skrývajú štyri odlišné zadania a každé má iné riešenie. Buď má stránka na webe zostať a nemá sa len zobrazovať vo vyhľadávaní, alebo má zmiznúť aj z webu, prípadne je situácia naliehavá, lebo sa na verejnosť dostal dokument, ktorý tam nepatrí. Štvrtý prípad je najčastejší a najmenej vážny: stránka už dávno neexistuje, no vo výsledkoch stále visí jej starý popis.

Od tohto rozhodnutia závisí všetko ostatné, pretože rýchle opatrenie a trvalé opatrenie sú v dokumentácii Googlu dva rôzne nástroje a jeden druhého nezastúpi. Pomocník k odstraňovaniu obsahu to hovorí priamo, keďže na rýchle odstránenie odporúča nástroj na odstraňovanie adries, ktorý stránku z výsledkov dostane v priebehu jedného dňa, no zároveň dopĺňa, že na trvalé zablokovanie treba urobiť jeden z troch ďalších krokov (Remove a page hosted on your site from Google).

Ešte pred samotnou prácou sa vyplatí spísať si všetky adresy, na ktorých je daný obsah dostupný. Dokumentácia žiada chrániť alebo odstrániť všetky varianty adresy obsahu, ktorý chcete odstrániť, a upozorňuje, že v mnohých prípadoch môžu na tú istú stránku viesť rôzne adresy, napríklad tvar s parametrom aj bez neho. Ak pracujete len s tou adresou, ktorú vidíte vo výsledkoch, obsah často zostane dostupný pod druhým tvarom a celá práca bude zbytočná.

2. Naliehavý prípad: nástroj na odstraňovanie adries

Nástroj na odstraňovanie adries v Search Console je jediný spôsob, ktorý zaberie rýchlo, a používa sa práve vtedy, keď potrebujete stránku dostať z vyhľadávania okamžite. Pomocník k nemu uvádza, že blokuje adresu vo výsledkoch Googlu približne šesť mesiacov, že sa stránka po skončení tohto obdobia môže vo výsledkoch znovu objaviť a že predtým, než sa vráti, bude znovu prehľadaná (Removals tool). Podmienkou je, že adresa patrí do property, ktorú vlastníte.

Zásadné je pochopiť, čo nástroj naozaj robí, lebo jeho názov sľubuje viac. Podľa pomocníka zablokovanie adresy nezabráni Googlu v prehľadávaní stránky, iba v jej zobrazení vo výsledkoch, a Google môže adresu prehľadávať ďalej, ak existuje a nie je zablokovaná iným spôsobom, napríklad tagom noindex. Z toho vyplýva aj dokumentované riziko, že stránka sa dá prehľadať ešte predtým, než ju zmažete alebo ochránite heslom, a po vypršaní dočasného zablokovania sa môže vo výsledkoch objaviť.

💡 Pozor na stránku, ktorá počas blokovania vypadne. Pomocník uvádza, že ak adresa počas použitia nástroja vráti chybu, konkrétne 404 alebo 502 a 503, nástroj bude predpokladať, že stránka je nedostupná, a požiadavka na zablokovanie stráca platnosť. Prípadná stránka nájdená na tej istej adrese neskôr sa potom považuje za novú.

Nástroj má aj dve použitia, pred ktorými pomocník výslovne varuje. Prvým je riešenie duplicity, pretože nástroj vám neuchová uprednostňovanú verziu stránky a namiesto toho môže odstrániť oba tvary adresy, takže na voľbu kanonickej adresy sa nepoužíva. Druhým je napadnutý web, kde pomocník odporúča zablokovať nové adresy, ktoré vytvoril útočník, no neodporúča zablokovať celý web ani adresy, ktoré budete chcieť raz indexované, a namiesto toho žiada web vyčistiť a nechať ho znovu prehľadať.

Blokovať sa dá presná adresa alebo celá predpona. Voľba presnej adresy blokuje vo výsledkoch iba tú jednu adresu vrátane prípony stránky a parametrov, kým voľba predpony zablokuje všetky adresy, ktoré ňou začínajú, a to vo verzii s www aj bez www. Pri celom priečinku s dokumentmi je preto predpona rýchlejšia než zadávanie desiatok adries po jednej.

3. Trvalé odstránenie: tri spôsoby z dokumentácie

Pomocník k odstraňovaniu obsahu vymenúva tri trvalé riešenia a rozdiel medzi nimi nie je technická drobnosť, lebo každé chráni obsah pred iným okruhom ľudí. Prvým je odstránenie alebo úprava obsahu na stránke, ktorú dokumentácia označuje za najbezpečnejší spôsob, ako zabrániť zobrazeniu informácie v iných vyhľadávačoch, ktoré tag noindex nemusia rešpektovať, a zároveň za spôsob, ktorý zabezpečí, že sa k stránke nedostanú ani samotní ľudia. Ak teda obsah nemá existovať, nestačí ho skryť pred vyhľadávačom.

Druhým spôsobom je ochrana stránky heslom, ktorá podľa pomocníka obmedzí prístup tak, že stránku uvidia správni používatelia, kým Googlebotu a ostatným robotom sa prístup zamedzí. Toto je riešenie pre interné dokumenty, testovacie prostredia a stránky pre klientov, teda pre obsah, ktorý má zostať dostupný, ale nie verejne.

Tretím spôsobom je tag noindex a pri ňom sa vyplatí vedieť presne, čo sľubuje. Dokumentácia uvádza, že keď Googlebot stránku prehľadá a extrahuje z nej tag alebo hlavičku, Google danú stránku úplne vypustí z výsledkov vyhľadávania bez ohľadu na to, či na ňu odkazujú iné weby (Block Search indexing with noindex). Súčasne však platí obmedzenie, ktoré pomocník k odstraňovaniu obsahu pripomína, keďže noindex blokuje iba zobrazenie stránky vo výsledkoch Googlu a používatelia aj vyhľadávače, ktoré ho nepodporujú, sa k obsahu dostanú.

Zapísať sa noindex dá dvoma spôsobmi, ktoré majú podľa dokumentácie rovnaký účinok, takže si vyberáte podľa toho, čo je na vašom webe pohodlnejšie a vhodnejšie pre daný typ obsahu. Prvým je tag <meta name="robots" content="noindex"> v sekcii <head> stránky, druhým hlavička odpovede X-Robots-Tag: noindex. Hlavička má jednu výhodu, ktorú tag nikdy mať nebude, pretože sa dá použiť aj pre zdroje, ktoré nie sú HTML, teda napríklad pre súbory PDF, video a obrázky. Ak web beží na redakčnom systéme ako WordPress, Wix alebo Blogger, dokumentácia odkazuje na nastavenia vyhľadávačov v samotnom systéme, lebo priamy zásah do HTML tam nemusí byť možný.

Ostáva otázka času a tá prekvapí najviac ľudí. Stránka po pridaní tagu z výsledkov nezmizne hneď, keďže Google ju musí najprv prehľadať, a dokumentácia k tomu dodáva, že podľa dôležitosti stránky na internete môže Googlebotu trvať aj mesiace, kým sa na stránku vráti. Preto je nástroj na kontrolu adresy užitočný dvakrát, lebo ním viete požiadať o nové prehľadanie a zároveň si overiť, aké HTML Googlebot pri prehľadávaní naozaj dostal.

4. Prečo zákaz v robots.txt stránku z indexu nedostane

Zákaz prehľadávania v súbore robots.txt vyzerá ako najjednoduchšie riešenie a práve preto sa používa najčastejšie nesprávne. Pomocník k odstraňovaniu obsahu ho odmieta jednou vetou, keď žiada nepoužívať robots.txt ako spôsob, akým stránku zablokovať, a dôvod vysvetľuje dokumentácia k tagu noindex: ak je stránka zablokovaná súborom robots.txt alebo sa k nej robot nedostane, robot pravidlo noindex nikdy neuvidí a stránka sa vo výsledkoch môže objaviť naďalej, napríklad keď na ňu odkazujú iné stránky.

Z toho vyplýva praktický záver, na ktorom stroskotá veľa pokusov o skrytie stránky. Aby tag noindex zabral, stránka nesmie byť zablokovaná v robots.txt a musí byť pre robota inak dostupná, čo znamená, že obe opatrenia naraz pracujú proti sebe. Ak už zákaz v robots.txt máte a stránka je stále v indexe, treba ho najprv odobrať, nechať Googlebota stránku prehľadať a až potom sa noindex uplatní.

Samotný zápis noindex do súboru robots.txt nie je alternatíva, lebo dokumentácia uvádza, že Google uvedenie pravidla noindex v súbore robots.txt nepodporuje. Rovnako treba počítať s tým, že niektoré vyhľadávače môžu pravidlo interpretovať odlišne, takže stránka sa vo výsledkoch iných vyhľadávačov môže zobraziť aj vtedy, keď ju Google už vypustil. Rozdiel medzi zákazom prehľadávania a zákazom indexovania rozoberá podrobnejšie článok o robots.txt a sitemap.xml, kým dôvody, prečo stránka v indexe chýba alebo naopak zostáva, prechádza článok o tom, prečo Google neindexuje stránky.

5. Porovnanie spôsobov a postup krok po kroku

Nasledujúca tabuľka zhŕňa, čo ktorý spôsob urobí a ako dlho jeho účinok vydrží. Riadky sú zoradené tak, ako sa v praxi zvyknú kombinovať, teda od najrýchlejšieho dočasného opatrenia k trvalým riešeniam.

SpôsobKedy ho použiťAko rýchlo zaberieAko dlho vydrží
Nástroj na odstraňovanie adriesnaliehavý prípad, kde nemôžete čakať na prehľadaniepodľa pomocníka do jedného dňapribližne šesť mesiacov, potom sa stránka môže vrátiť
noindex v tagu <meta>stránka má na webe zostať, ale nemá byť vo vyhľadávaníaž po ďalšom prehľadaní, čo môže trvať mesiacetrvalo, kým tag na stránke necháte
noindex v hlavičke X-Robots-Tagto isté pre súbory PDF, video a obrázkyaž po ďalšom prehľadanítrvalo, kým hlavičku server posiela
Zmazanie alebo úprava obsahuobsah nemá existovať ani na webepo prehľadaní adresy s chybou 404 alebo 410trvalo a platí aj pre iné vyhľadávače
Ochrana heslominterné dokumenty a testovacie prostrediaokamžite pre robota, z indexu po prehľadanítrvalo, kým je prihlásenie vyžadované
Zákaz v robots.txtna odstránenie z indexu sa nepoužívaneodstráni ju vôbecstránka môže vo výsledkoch zostať

Poradie krokov je pri naliehavom prípade dôležitejšie než výber jedného nástroja, pretože dočasné opatrenie má podľa pomocníka slúžiť ako prvý krok k trvalému zablokovaniu stránky. Prakticky to znamená nasledujúcu postupnosť.

  1. Spíšte všetky adresy obsahu vrátane tvarov s parametrami, s www aj bez www, lebo dokumentácia žiada chrániť alebo odstrániť všetky varianty adresy.
  2. Zadajte dočasné zablokovanie v nástroji na odstraňovanie adries, ak je situácia naliehavá. Pri celom priečinku použite blokovanie podľa predpony.
  3. Rozhodnite o trvalom riešení podľa toho, či má obsah zostať dostupný: zmazanie, heslo alebo noindex.
  4. Odoberte prekážky pre robota, teda prípadný zákaz v robots.txt na danej adrese, inak Googlebot pravidlo noindex nikdy neuvidí.
  5. Požiadajte o prehľadanie nástrojom na kontrolu adresy a tým istým nástrojom si overte HTML, ktoré Googlebot dostal.
  6. Skontrolujte to znovu po pol roku, keďže dočasné zablokovanie po približne šiestich mesiacoch vyprší a bez trvalého opatrenia sa stránka vráti.

6. Cudzí web a stará ukážka, ktorá stále visí vo výsledkoch

Obsah na webe, ktorý nevlastníte, z Googlu odstrániť neviete a žiadny nástroj to nezmení. Pomocník na otázku, ako odstrániť obsah zo stránky, ktorú nevlastníte, odkazuje na postup pre odstraňovanie osobných informácií, čo je samostatná cesta určená pre citlivé údaje a nie pre obsah, ktorý sa vám len nehodí. Bežnou cestou zostáva kontaktovať majiteľa webu a požiadať o zmenu priamo tam, pretože kým je obsah na cudzom serveri, vyhľadávač ho bude nachádzať.

Druhá častá situácia je stránka, ktorú ste už zmazali, no vo výsledkoch stále vidíte jej starý popis. Pomocník k obnove neaktuálneho obsahu to vysvetľuje tak, že ak bol obsah z webu odstránený a vo výsledkoch sa stále objavuje, popis stránky alebo uložená kópia môžu byť neaktuálne (Refresh outdated content). Formulár na obnovu je určený práve na tento prípad, no ten istý pomocník dodáva, že ak ste živú stránku už aktualizovali, formulár vypĺňať nemusíte.

Pri väčšom počte zmazaných adries má zmysel nechať veci plynúť, a to na základe vyjadrenia priamo z pomocníka. Ten uvádza, že ak ste web nedávno zmenili a v indexe máte neaktuálne adresy, roboti Googlu to pri opätovnom prehľadaní uvidia a tie stránky z výsledkov prirodzene vypadnú, pričom nie je potrebné žiadať o naliehavú aktualizáciu. Dokumentácia k stavovým kódom to potvrdzuje z druhej strany, keďže pri chybách 4xx indexovací systém adresu z indexu odstráni, ak v ňom predtým bola, novo objavené stránky s kódom 404 nespracuje a frekvencia prehľadávania postupne klesá (HTTP status codes and network errors).

Zostáva rozhodnutie, ktoré sa pri mazaní obsahu robí naposledy, hoci by malo byť prvé. Ak na stránku vedú spätné odkazy alebo má históriu vo vyhľadávaní, jej zmazaním prichádzate o oboje a vhodnejším riešením býva trvalé presmerovanie na najbližšiu zmysluplnú stránku, ako to rozoberá článok o presmerovaniach 301. Odstránenie z Googlu si vyberajte vtedy, keď obsah naozaj nemá existovať, nie ako spôsob, ako sa zbaviť stránky, ktorá len potrebuje prepísať.

Časté otázky

Ako rýchlo sa dá stránka odstrániť z Googlu?

Rýchlo to zvládne iba nástroj na odstraňovanie adries v Search Console, ktorý podľa pomocníka stránku z výsledkov dostane v priebehu jedného dňa. Tag noindex naopak zaberie až po ďalšom prehľadaní stránky a dokumentácia upozorňuje, že podľa dôležitosti stránky na internete to môže Googlebotu trvať aj mesiace. Preto sa pri naliehavom prípade oba spôsoby kombinujú, teda najprv dočasné zablokovanie a potom trvalé opatrenie.

Prečo je stránka stále v Googli, keď ju mám zakázanú v robots.txt?

Pretože zákaz v robots.txt rieši prehľadávanie, nie indexovanie. Dokumentácia k tagu noindex uvádza, že ak je stránka zablokovaná súborom robots.txt alebo sa k nej robot nedostane, robot pravidlo noindex nikdy neuvidí a stránka sa môže vo výsledkoch objaviť naďalej, napríklad keď na ňu odkazujú iné stránky. Pomocník k odstraňovaniu obsahu preto priamo žiada nepoužívať robots.txt ako spôsob zablokovania stránky.

Vydrží zablokovanie v nástroji na odstraňovanie adries navždy?

Nevydrží. Pomocník uvádza, že nástroj blokuje adresu vo výsledkoch približne šesť mesiacov a že po skončení tohto obdobia sa stránka môže vo výsledkoch znovu objaviť, pričom predtým bude znovu prehľadaná. Na trvalé zablokovanie treba obsah odstrániť alebo upraviť, chrániť stránku heslom, prípadne použiť tag noindex.

Ako dostať z vyhľadávania súbor PDF?

Cez hlavičku odpovede X-Robots-Tag s hodnotou noindex, ktorú dokumentácia odporúča práve pre zdroje, ktoré nie sú HTML, teda napríklad pre súbory PDF, video a obrázky. Tag v sekcii head sa tu použiť nedá, lebo súbor žiadne HTML neobsahuje. Ak má dokument zostať prístupný len pre vybraných ľudí, bezpečnejšou voľbou je ochrana heslom.

Mám stránku zmazať, alebo jej dať noindex?

Podľa toho, či má obsah existovať. Zmazanie alebo úpravu obsahu označuje pomocník za najbezpečnejší spôsob, ako zabrániť zobrazeniu informácie v iných vyhľadávačoch, ktoré tag noindex nemusia rešpektovať, a zároveň za spôsob, ktorý zabezpečí, že sa k stránke nedostanú ani samotní ľudia. Tag noindex naopak stránku nechá dostupnú pre každého, kto pozná adresu, takže sa hodí na obsah, ktorý má na webe zostať, len nemá byť vo vyhľadávaní.

Zmazal som staré stránky a vo výsledkoch sú stále. Mám niečo robiť?

Zvyčajne netreba. Pomocník uvádza, že ak ste web nedávno zmenili a v indexe máte neaktuálne adresy, roboti Googlu to pri opätovnom prehľadaní uvidia a tie stránky z výsledkov prirodzene vypadnú, pričom nie je potrebné žiadať o naliehavú aktualizáciu. Ak na zmazané stránky viedli spätné odkazy, zvážte namiesto mazania trvalé presmerovanie na najbližšiu zmysluplnú stránku.

HľadaťDohodnúť stretnutie