PageRank, robots.txt a link building

Kreslený robotický pavouk crawler kráčí po světelné mřížce stránek pod proudem kódu, symbol procházení robots.txt

Uživatelé internetu mají tendenci odkazovat tam, kam byste vy nejraději nechtěli. Skoro nikdo neodkazuje na kategorie e-shopu, za to produkty ano. A taky je tu ještě skupina lidí, která sdílí odkazy třeba na výsledky interního hledání. Co s tím, když máte na starosti SEO a link building?

Jestliže se držíte doporučení Google, máte adresy s výsledky interního hledání zablokované před zvědavými pohledy crawlerů v robots.txt. Což je fajn. Když ale na takovou adresu odkáže nějaký web, nic z toho nemáte. Proč?

Taková URL sice může být v indexu, ale nebude rankovat na prakticky žádné dotazy. A co hůř, PageRank, který by případně získala, se nepošle pro další adresy na vašem webu, protože je bot vyhledávače nemůže znát.

Co je PageRank?

A to je jeden z mnoha cílů link buildingu. Každý získaný odkaz pomůže adrese, na kterou se přímo odkazuje a nepřímo i všem dalším. Řešení ale existuje, stačí upravovat svůj soubor robots.txt.

Jak na to?

V Ahrefs nebo podobné službě hledejte odkazy, které vedou na URL, které máte v blokované v robots.txt. Stačí zadávat ty části URL, které v robots.txt blokujete.

Například české Bonami má identifikátor hledání v URL tento:

hledej?q=

V Ahrefs v záložce Backlinks najdu filtr Target URL a do něj identifikátor vložím.

Aktuálně vidím, že Bonami má 55 skupin odkazů, které míří na adresy interního hledání. například Aktualne.cz jim odkazuje na adresu https://www.bonami.cz/hledej?q=ZRCADLO.

Na místě Bonami bych tedy v robots.txt povolil přesně tuto URL k procházení takto:

Allow: /hledej?q=ZRCADLO$

Znak $ na konci zajistí, že půjde o přesnou shodu.

Tip: Zkuste můj oblíbený robots.txt tester z dílny Spotibo.

Podle toho, jakou rychlostí vám přibývají odkazy přirozeně, zvolte i frekvenci auditu. Ideální je podívat se aspoň jednou měsíčně. Plusem taky je, když má do robots.txt SEO specialista přístup přímo a nemusí čekat na zásah vývojáře.

Co byste si mohli přečíst dál?

Jeden komentář

Napište komentář

Vaše e-mailová adresa nebude zveřejněna. Povinná pole jsou označená.