Kleines Robot.txt Problem bzw. Frage

djjlx

---???---
ID: 62937
L
9 Mai 2006
599
21
Hallo!

Hab eine frage zur Robot txt.

Ich hab folgenden Inhalt

User-Agent: *
Allow: /index.php
Disallow: /

Möchte damit erzielen das nur die indexseite gecrawlt wird und keine Unterseiten. ist der Inhalt korrekt oder die die Verweigerung / höher gestuft als die erlaubniss?!

LG
 
Das wird dir sicher weiterhelfen. Ganz wichtig ist auch, dass die Datei robots.txt und nicht Robot.txt heißt. Ich meine nur, weil Du es bereits zwei mal so geschrieben hast. ;)
 
also für g00gle funktioniert es so wie du es geschrieben hast, allerdings solltest du wirklich auf die Kleinschreibung des Dateinamens achten ;)
 
Soweit ich weiß, muss das Allow nach dem Disallow, weil sonst erst die Datei erlaubt wird und danach wieder alles verboten ;)