Comments on: Spidertrap wird 1 http://www.entartete-kunst.com/spidertrap-wird-1/ 2+2=5 Fri, 21 Nov 2008 11:38:38 +0000 http://wordpress.org/?v=0.8.15 by: missi http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6039 Tue, 30 Jan 2007 23:38:23 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6039 *seufz* Doch, du warst wieder im Spam. Ich muss nur nochmal rausfinden, warum das so ist. :\ Gute Frage, obs an der robots liegt, bei mir steht "User-agent: googlebot" und Google hält sich daran. Bei den <a href="http://www.google.com/webmasters/" rel="nofollow">"webmaster-tools"</a> (braucht nen account) erkennt er auch exakt die für ihn geblockten Verzeichnisse. *seufz* Doch, du warst wieder im Spam. Ich muss nur nochmal rausfinden, warum das so ist. :\

Gute Frage, obs an der robots liegt, bei mir steht "User-agent: googlebot" und Google hält sich daran. Bei den "webmaster-tools" (braucht nen account) erkennt er auch exakt die für ihn geblockten Verzeichnisse.

]]> by: Sven http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6038 Tue, 30 Jan 2007 21:47:03 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6038 Ich hoffe mal, ich lande nicht wieder in Deinem Spam ;-) Kann es sein, dass es evtl. einfach nur an der Groß-/Kleinschreibung von Googlebot in der robots.txt liegt? Seit ich das geändert habe, läuft alles rund! Ich hoffe mal, ich lande nicht wieder in Deinem Spam ;-)

Kann es sein, dass es evtl. einfach nur an der Groß-/Kleinschreibung von Googlebot in der robots.txt liegt?
Seit ich das geändert habe, läuft alles rund!

]]> by: missi http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6034 Tue, 30 Jan 2007 19:49:22 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6034 Bei mir stehts so in der whitelist: 64.68.82.* Und so läufts schon seit ewigen Zeiten, seit der 0.92 schon. Auf UserAgent würd ich persönlich nicht filtern, die lassen sich fälschen und Fakegooglebot gibts öfter da draußen. :) <a href="http://www.spider-trap.de/forum/immer+wieder+google,64.html" rel="nofollow">Da im Supportforum tauchte die Frage schon auf.</a> Bei mir stehts so in der whitelist: 64.68.82.*
Und so läufts schon seit ewigen Zeiten, seit der 0.92 schon.

Auf UserAgent würd ich persönlich nicht filtern, die lassen sich fälschen und Fakegooglebot gibts öfter da draußen. :)

Da im Supportforum tauchte die Frage schon auf.

]]> by: Sven http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6032 Tue, 30 Jan 2007 18:21:49 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6032 Hi Lawe! Seit ich heute morgen googlebot in Googlebot (!) geändert habe, hat sich mein Problem mit Google erstmal erledigt! Könnte es evtl. ein Fake-Bot sein? Ansonsten die IP rein in die Whitelist (falls Du Wert auf Yahoo legst), oder wieder die 0.92er Version installiert! (Der Quelltext des Spiders ist mir echt zu unübersichtlich aufgebaut). Hi Lawe!
Seit ich heute morgen googlebot in Googlebot (!) geändert habe, hat sich mein Problem mit Google erstmal erledigt!
Könnte es evtl. ein Fake-Bot sein?
Ansonsten die IP rein in die Whitelist (falls Du Wert auf Yahoo legst), oder wieder die 0.92er Version installiert! (Der Quelltext des Spiders ist mir echt zu unübersichtlich aufgebaut).

]]> by: Lawe http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6031 Tue, 30 Jan 2007 18:00:11 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6031 so und auch Yahoo Slurp! is in die Falle gegangen.. entweder die Dinger scheren sich einen Dreck um die Robots.txt oder hier läuft gewaltig was schief... so und auch Yahoo Slurp! is in die Falle gegangen.. entweder die Dinger scheren sich einen Dreck um die Robots.txt oder hier läuft gewaltig was schief...

]]> by: Lawe http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6029 Tue, 30 Jan 2007 17:44:13 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6029 so nun is Google auch bei mir in die Falle gelatscht... Neuer Spambot: /guestbook/index.php 30.01.2007|18.36.30 Host: www.lawes-world.de IP: 66.249.72.75 User-Agent: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) WHOIS: http://whois.domaintools.com/66.249.72.75 Ich hau se mal auf die Whitelist... so nun is Google auch bei mir in die Falle gelatscht...
Neuer Spambot: /guestbook/index.php 30.01.2007|18.36.30
Host: www.lawes-world.de
IP: 66.249.72.75
User-Agent: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

WHOIS: http://whois.domaint...ols.com/66.249.72.75

Ich hau se mal auf die Whitelist...

]]> by: Lawes World http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6027 Tue, 30 Jan 2007 16:47:44 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6027 <strong>Spambots Aussperren...</strong> Gerade eben drüben bei Missi gelesen, dass Spider-Trap in der V1 erschienen ist… Wer kennt die fiesen Spambots nicht, bzw. Crawler die sich trotz robots.txt nicht an die Anweisungen halten? Was kann man dagegen tun? aussperren und zwar mit ... Spambots Aussperren...

Gerade eben drüben bei Missi gelesen, dass Spider-Trap in der V1 erschienen ist...
Wer kennt die fiesen Spambots nicht, bzw. Crawler die sich trotz robots.txt nicht an die Anweisungen halten?
Was kann man dagegen tun? aussperren und zwar mit ...

]]> by: Lawe http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6024 Tue, 30 Jan 2007 11:56:23 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6024 Ich glaub du darfst mal wieder support machen, falls das updaten bei mir nicht funzt ;) Wie war doch gleich deine ICQ Nr.? :-p Ich glaub du darfst mal wieder support machen, falls das updaten bei mir nicht funzt ;) Wie war doch gleich deine ICQ Nr.? :-p

]]> by: Sven http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6023 Tue, 30 Jan 2007 08:45:30 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6023 Jup, habe ich! Aber trotz WL wieder in der htaccess! Ich habe schon extra einen IP-Range für die GoogleBots gesetzt! Ich verstehe das nicht! Ich habe ein META-Tag mit NOFOLLOW, eine robots.txt, und Google fragt trotzdem den bösen Ordner ab! Jup, habe ich!
Aber trotz WL wieder in der htaccess!
Ich habe schon extra einen IP-Range für die GoogleBots gesetzt!
Ich verstehe das nicht!
Ich habe ein META-Tag mit NOFOLLOW, eine robots.txt, und Google fragt trotzdem den bösen Ordner ab!

]]> by: missi http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6022 Tue, 30 Jan 2007 08:25:07 +0000 http://www.entartete-kunst.com/spidertrap-wird-1/#comment-6022 Bei mir alles fein, wie bisher. Hast du google auf der whitelist? Bei mir alles fein, wie bisher. Hast du google auf der whitelist?

]]>