Hi, weiss jemand wie man diesen Bing Bot von Microsoft von einer Website blockieren kann mittels robots.txt? Bzw. Was ich genau da rein schreiben muss?
Der Bing Bot ist der neue MSN Bot von Microsoft.
EDIT: Hat sich erledigt. 
User-agent: bingbot
Disallow: /Den Bing Bot würde ich jetzt nicht aus meiner HP aussperren wollen und sehe dies auch als ein Fehler an.
Bing und Yahoo gehören jetzt zusammen und es fängt jetzt schon an, das die Crawler Ergebnisse durch den Bing Bot in den Ergebnisse von Yahoo auftauchen und warum willst du auf die Suchmaschinen wie Bing und Yahoo zukünftig verzichten ?
Nachtrag; sorrx leider kann ich als Gast den Beitrag nicht editieren.
Wenn der Bing Bot zu stark eure Seite crawlert, dann schränkt den Bot einfach mit dem folgenden Code ein
zb so
User-agent: bingbot
Crawl-delay: 5