Hey in diesen Tutorial ist beschireben wie ihr als Google Bot Surfst
Vorteile :
Ihr kennt das wenn ihr euch seiten anguck und dort steht ihr müsst euch Reggn das ist damit nicht.
Wenn ihr eure eigene Hompage Damit durchforstet wird sie bei Google leichter zu finden,
Meist werd ihr aber nach 20 Min von Google entlarvt und gekickt
1. auf
UserAgentString.com - List of User Agent Strings gehn
2.dort einen bot aussuchen als beispiel nehm ich den google bot
nach dem klicken steht da
Quellcode 1 Mozilla/5.0 (compatible; Googlebot /2.1; +
Verifying Googlebot - Webmaster Tools Help) Googlebot /2.1 (+http://www. googlebot .com/bot.html) Googlebot /2.1 (+
Verifying Googlebot - Webmaster Tools Help)
die zweite zeile kopiert iht jetzt
dann gebt ihr in eure adresszeile about :config
dann macht ihr mit rechtsklick>neu>string einen neuen string und nennt ihn :
general.useragent.override
dann rechtsklickt ihr auf euren neuen string und wählt bearbeiten in dem fenster gebt ihr den wert ein den ihr am anfang kopiert habt jetz nur noch ok klicken und fertig
obs geklappt habt könnt ihr auf useragentstring.com nachgucken
66.249.64.14 - crawl-66-249-64-14.googlebot.com