[ps915]

Hallo,
ich habe folgende .htaccess:

AddHandler x-httpd-php5 .php
 AddType application/x-httpd-php5 .php
 
 User-agent: ia_archiver
 Disallow: /
 
 RewriteEngine on
 RewriteCond %{HTTP_HOST} ^toasterfraktion\.de$
 RewriteRule ^(.*)$ http://www.toasterfraktion.de/$1 [R=permanent] 
 
 ErrorDocument 401 http://www.toasterfraktion.de/error/error.php?code=401
 ErrorDocument 402 http://www.toasterfraktion.de/error/error.php?code=402
 ErrorDocument 403 http://www.toasterfraktion.de/error/error.php?code=403
 ErrorDocument 404 http://www.toasterfraktion.de/error/error.php?code=404
 ErrorDocument 500 http://www.toasterfraktion.de/error/error.php?code=500
 ErrorDocument 501 http://www.toasterfraktion.de/error/error.php?code=501
 ErrorDocument 502 http://www.toasterfraktion.de/error/error.php?code=502
 ErrorDocument 503 http://www.toasterfraktion.de/error/error.php?code=503

Ich habe den Useragent ia_archiver hinzugefügt, damit archiev.org geblockt wird!

Nur danach bekomme ich wenn ich auf meine Seite surfe nur:

Zitat

Internal Server Error
The server encountered an internal error or misconfiguration and was unable to complete your request.

Please contact the server administrator, [no address given] and inform them of the time the error occurred, and anything you might have done that may have caused the error.

More information about this error may be available in the server error log.

Apache Server at www.toasterfraktion.de Port 80

Woran liegt das? Kann ich den Useragent so nicht sperren?

Gruß,
Toasterfraktion

[asko]

Zitat (Toasterfraktion: 07.12.2008, 02:15)

User-agent: ia_archiver
Disallow: /
.
.
.
Woran liegt das? Kann ich den Useragent so nicht sperren?

Das gehört in dieser Form wohl eher in die robots.txt und weniger in die .htaccess.

Um Robots per .htaccess auszusperren benutzt man eine Rewrite Condition. Z.B.:

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} ^ia_archiver
RewriteRule ^(.*)$ [F]

Was hast Du denn gegen den ia_archiver? Davon nährt sich u.a. web.archive.org, was seinerseits von Google Beachtung findet, ähnlich Webverzeichnisse wie z.B. DMOZ, und das (Seiten die darin gelistet sind) wiederum hat einen positiven Einfluss auf den Pagerank und auf Bewertungen bei anderen Diensten. Außer dem bisschen extra Traffic hat es also keine negativen Eigenschaften, wenn sich dieser Bot auf deiner Seite herumtreibt. Im Gegenteil - kommt der Bot nie vorbei, zeugt das davon, dass deine Seite bei SuMas als minderwertig bis unbedeutend eingestuft wird.
Aber ist ja letztendlich deine Entscheidung, welchen Bots Du auf deiner Seite Zugriff gewährst und welchen nicht.