Yahoo blokuje boty: Co to oznacza dla SEO?

Yahoo blokuje boty: Co to oznacza dla SEO?

2008-02-18 10:43 Redakcja

W miniony weekend Yahoo zablokowało roboty i boty spoza własnych wyszukiwarek, uniemożliwiając im przeszukiwanie serwisu Delicious. Colin Cochrane ujawnił, że to nie jest jedynie prosta blokada w pliku robots.txt, ale odpowiedź 404, która jest teraz serwowana w zależności od żądania User-Agent.

Analizując plik robots.txt Delicious, można zauważyć, że uniemożliwia on dostęp do takich botów jak Googlebot, Slurp, Teoma i msnbot. Blokowane są następujące ścieżki:

Blokując te roboty, Yahoo może kontrolować, które strony i zakładki są widoczne w wyszukiwarkach, co ma istotny wpływ na pozycjonowanie.

Najnowsze wiadomosci ⚡📰

Nie przegap żadnego trendu, hacka ani dramy w świecie marketingu! 🧠
Mamy już ponad 155 000 artykułów i codziennie dorzucamy 50–100 nowych perełek z SEO, PR, social mediów, reklam, AI i brandingu. Do tego wywiady, nowe narzędzia pozwalające dowieźć wyniki i nutka prawa oraz bezpieczeństwa. Wszystko podane w starupowym sosie, który nigdy sie nie nudzi.
Zapisz się teraz, a Twoja skrzynka stanie się potężniejsza niż raporty z Analyticsa.