Crawlable content
Treść, którą robot może pobrać, zobaczyć i zrozumieć.
Co to jest Crawlable content?
Treść dostępna dla robotów (crawlable content) to taka, którą wyszukiwarka może pobrać i zrozumieć bez przeszkód: jest publiczna, linkowana, renderuje się poprawnie i nie jest blokowana przez robots.txt ani noindex.
Jeśli kluczowa treść pojawia się dopiero po zalogowaniu, po kliknięciu lub wyłącznie przez ciężki JavaScript, robot może jej nie zobaczyć — a wtedy nie trafi do indeksu.
Dlaczego to ważne dla SEO
To fundament całego SEO i widoczności w AI: zanim treść zostanie oceniona, musi w ogóle zostać pobrana i odczytana. Najlepsza strona niewidoczna dla robota nie istnieje w wynikach.
Jak to sprawdzić
Sprawdź, czy ważna treść jest w renderowanym HTML (np. URL Inspection „na żywo” w Search Console). Upewnij się, że robots.txt nie blokuje CSS/JS, a kluczowe sekcje nie wymagają logowania.
Częste błędy
- Treść tylko po zalogowaniu lub po interakcji
- Blokowanie zasobów potrzebnych do renderowania w robots.txt
- Przypadkowy noindex na ważnych podstronach