Robot Liste von Suchmaschinen
#1
Hi Leute,

Frage, weiss jemand wo man eine aktuelle Roboter Liste von Suchmaschinen findet?

Also z.B. das ich Sie identifizieren kann.
So kommt z.B. der Googlebot per HTTP Headerdaten auf die Seite:
^Googlebot/2\.\d \((\+)*http://www.googlebot.com/bot.html\)$

Und ich möchte jetzt die Header Daten von mehreren Roboter, hab zwar eh ziemlich viele, wär aber trotzdem nützlich.

mfg
Zerogiven
<a href="http://www.boldluck.at" target="_blank">
[Bild: boldluck468603.gif] </a>
  Zitieren
#2
http://www.psychedelix.com/agents.html

da is ca alles was es gibt - robots, spiders, crawler und browser
Write this on my gravestone, write this right on my grave, "To whisky and women, here lies a poor slave".

[Bild: 10_en_btn.gif]

Computer- und Mediensicherheit - FH Hagenberg
Hagenberger Kreis zur Förderung der digitalen Sicherheit
Security Forum
  Zitieren
#3
Wow cool danke

@balu: Nein das geht nicht, du kannst aber mit dieser Tabelle Roboter identifizieren. z.b. Googlebot = http://www.google.com,...

mfg
<a href="http://www.boldluck.at" target="_blank">
[Bild: boldluck468603.gif] </a>
  Zitieren


Gehe zu:


Benutzer, die gerade dieses Thema anschauen: 4 Gast/Gäste