Google a problem z dużymi plikami robots.txt?

Google a problem z dużymi plikami robots.txt?

2022-01-18 20:13 Redakcja

Google porusza temat plików robots.txt i ich wpływu na praktyki SEO. Podczas sesji pytań i odpowiedzi, John Mueller, advocate wyszukiwania w Google, wyjaśnia, dlaczego warto utrzymywać pliki robots.txt w rozsądnych rozmiarach.

W dyskusji bierze udział David Zieger, menedżer SEO pracujący dla dużego wydawcy w Niemczech, który zgłasza obawy dotyczące swojego „ogromnego” i „skomplikowanego” pliku robots.txt. Jak wielki jest problem? Zieger wskazuje na ponad 1,500 linii, w których znajduje się wiele disallow, które rosną z upływem lat.

Te disallow uniemożliwiają Google indeksowanie fragmentów HTML oraz URL-i, w których wykorzystywane są wywołania AJAX. Zieger podkreśla, że ustawienie noindex nie jest możliwe, co skłoniło go do wypełnienia pliku robots.txt zakazami.

Najnowsze wiadomosci ⚡📰

Nie przegap żadnego trendu, hacka ani dramy w świecie marketingu! 🧠
Mamy już ponad 155 000 artykułów i codziennie dorzucamy 50–100 nowych perełek z SEO, PR, social mediów, reklam, AI i brandingu. Do tego wywiady, nowe narzędzia pozwalające dowieźć wyniki i nutka prawa oraz bezpieczeństwa. Wszystko podane w starupowym sosie, który nigdy sie nie nudzi.
Zapisz się teraz, a Twoja skrzynka stanie się potężniejsza niż raporty z Analyticsa.