Amazon Affiliate Bot identifizieren / Zugriff erlauben
Geschrieben von everflux am Oktober 10th, 2007Für alle die sich, wie ich, fragen welchen UserAgent der Amazon Affiliate Bot verwendet:
Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)
Der Bot wird von Amazon z.B. eingesetzt wenn man Kontext-Werbung für das Amazon Affiliate Programm einbindet. (Z.B. durch die Amazon Links, oder die Amazon Kontext-Banner)
Der UserAgent kann verwendet werden, um den Bot auf normalerweise geschützte Seiten zu lassen oder eine optimierte Version der Seite auszuliefern.
Man sollte dabei bedenken, dass man den UserAgent eines Browsers auch als Benutzer umstellen kann, z.B. sehr komfortabel über ein Firefox Addon. Den Zugriff auf passwortgeschützte Seiten dann nur über den User-Agent für den Amazon Bot freizugeben halte ich für zu kurz gegriffen.
Sicherer ist da sicherlich noch zusätzlich die IP des Bots zu verwenden – bei mir kamen die Zugriffe bisher von der IP
87.238.80.64
Bei der Kombination dürfte man dann relativ sicher gehen, dass auch nur der Bot die Inhalte crawlt.
Neue Kommentare