Der Amazon Bot (AMZNKAssocBot/4.0) ist ein ganz schön fleißiger Bot. Insbesondere, wenn es darum geht, die robots.txt abzurufen.
Offenbar findet so ein Abruf nämlich vor jedem anderen Request statt, ein Verhalten, dass ich früher so nicht beobachtet habe.

87.238.80.64 - - [30/Mar/2008:13:48:53 +0200] "GET /robots.txt HTTP/1.1"
200 783 "-" "Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)" 0 forum
87.238.80.64 - - [30/Mar/2008:13:48:54 +0200] "GET /robots.txt HTTP/1.1"
200783 "-" "Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)" 0 forum
87.238.80.64 - - [30/Mar/2008:13:48:55 +0200] "GET /robots.txt HTTP/1.1"
200 783 "-" "Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)" 0 forum
87.238.80.64 - - [30/Mar/2008:13:48:56 +0200] "GET /robots.txt HTTP/1.1"
200 783 "-" "Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)" 0 forum
87.238.80.64 - - [30/Mar/2008:13:48:56 +0200] "GET /robots.txt HTTP/1.1"
200 783 "-" "Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)" 0 forum
87.238.80.64 - - [30/Mar/2008:13:48:58 +0200] "GET /robots.txt HTTP/1.1"
200 783 "-" "Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)" 0 forum
87.238.80.64 - - [30/Mar/2008:13:48:59 +0200] "GET /robots.txt HTTP/1.1"
200 783 "-" "Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)" 0 forum
87.238.80.64 - - [30/Mar/2008:13:49:00 +0200] "GET /robots.txt HTTP/1.1"
200 783 "-" "Mozilla/5.0 (compatible; AMZNKAssocBot/4.0)" 0 forum

Der Amazon Partnernet Support ist dann auch direkt kontaktiert worden – schließlich ändert sich die robots.txt so schnell nun auch wieder nicht, und der alte Server freut sich über solche Requests nicht unbedingt in den siebten Himmel.

  1. Amazon Affiliate Bot identifizieren / Zugriff erlauben
  2. Amazon mit neuen elastic Diensten
  3. Amazon context-links als neues Werbemittel
  4. Amazon patentiert schlechten Service für schlechte Kunden
  5. Partnerschaft zwischen Amazon und Sun?
  6. Amazon: Tote klicken bitte hier
  7. Rivva – genehmigt.
  8. id-search.org bot abuse