Yahoo Slurp Crawler przenosi się na nowy adres!

2007-06-06 09:34 Redakcja

Yahoo Slurp Crawler przenosi się na nowy adres!

Yahoo zaktualizowało swój crawler, Yahoo Slurp, przenosząc go na nowy adres: crawl.yahoo.net. Dla wydawców korzystających z filtracji IP, zmiana ta nie powinna wymagać edytowania plików robots.txt, ponieważ adres IP pozostaje ten sam.

W celu zabezpieczenia przed nieautoryzowanymi botami, Yahoo zaleca ustawienie uwierzytelniania DNS wstecznego. Dzięki temu można mieć pewność, że tylko prawdziwe boty Yahoo odwiedzają stronę. Jak to działa?

Sprawdzaj user-agent oraz adres IP przy każdym żądaniu.Żądania od Yahoo! Slurp zaczynają się od ‘Yahoo! Slurp’ w user-agencie.

Warto wdrożyć te środki, aby chronić swoją stronę przed fałszywymi botami, które mogą próbować podszywać się pod prawdziwego Yahoo Slurpa.

Na podstawie: Źródła

Najnowsze wiadomosci ⚡📰

🚀 Dołącz do Marketingowej Elity!

Codzienna dawka marketingu, która nie parzy jak kawa — ale działa szybciej.

Nie przegap żadnego trendu, hacka ani dramy w świecie marketingu! 🧠
Mamy już ponad 155 000 artykułów i codziennie dorzucamy 50–100 nowych perełek z SEO, PR, social mediów, reklam, AI i brandingu. Do tego wywiady, nowe narzędzia pozwalające dowieźć wyniki i nutka prawa oraz bezpieczeństwa. Wszystko podane w starupowym sosie, który nigdy sie nie nudzi.
Zapisz się teraz, a Twoja skrzynka stanie się potężniejsza niż raporty z Analyticsa.