robots.txt

[gottfried]

Hallo !

Funktioniert robots.txt auch im pages - Unterverzeichniss des wb ?
ich möcht meine mailto:x@y.z schützen.

Grüße !

[albatros]

Hi,

hier http://de.selfhtml.org/diverses/robots.htm findest Du reichlich Infos u.a. auch zum Speicherort.

Du weißt aber schon, dass gerade die robots.txt für böse Buben bzw. Robots eine große Hilfe sein kann, um genau das zu finden, was Du verstecken möchtest? Und das Suchmaschinen die robots.txt respektieren können (werden seriöse wohl auch), aber ...

Wie hast Du Dir denn vorgestellt, damit Deine Mailadresse zu schützen?

hth

albaros

[gottfried]

Hallo Albatros ! Ich habe ein robots.txt mit

User-agent: *

Disallow: /kontakt.php

in das Verzeichniss gestellt, das eine Kontaktseite enthält, die außer einem Form noch diverse emailadressen diverser Verantwortlicher enthält.

Interessanter Tip, daß böse Böse buben gezielt nach robots.txt suchen. Wie machen die das?

Vielleicht sollte ich auf die mailto's ganz verzichten. ?

Mittlerweile hab ich robots.txt in das rootverzeichniss gestellt, nachdem ich einen Beitrag weiter unten gelesen habe.

[albatros]

Interessanter Tip, daß böse Böse buben gezielt nach robots.txt suchen. Wie machen die das?

Hi,

ob danach gezielt gesucht wird, weiß ich nicht. Aber wer hindert mich im Root Deiner Website einfach mal nach einer robots.txt zu sehen? Ob ich mit dem Inhalt groß was anfangen kann, ist dann ja noch eine andere Frage. Aber von der Logik her...Du versuchst Daten mit Hilfe einer Datei zu verstecken, die jeder sehen kann. Und da steht dann drin, was Du verstecken willst, und wo es ist.  

Um Dich for Spam zu schützen kannst Du für eine E-Mailadresse z.B. Javasript oder ein Bild nutzen. Ist aber beides auch keine optimale Lösung.

Und für ein Kontaktformular kannst Du ja bei WB mittlerweile zwischen verschiedenen Captcha-Lösungen wählen.

hth

albatros

[maverik]

moin

interessanter Lesestoff zum Thema http://www.abakus-internet-marketing.de/seo-artikel/robots-txt.htm

[albatros]

Hi,

für einige Zwecke ist die robots.txt sicher auch sehr nützlich (z.B. Beispiel: bestimmte Bereiche sollen nicht von Google etc. indexiert werden).

Aber ich habe doch sehr große Zweifel, ob der im Artikel genannte "EmailCollector" und andere Programme sich an das Verbot in der robots.txt halten. Weshalb sollten es?

Gruß

Uwe