|
|
|
|
|
|
|||||||
| Programmierung Rat & Tat für Programmierer |
|
|
Themen-Optionen | Ansicht |
09.05.2005, 16:09
|
#4 |
|
Elite
 Registriert seit: 28.04.2002
Beiträge: 1.307
|
ja tausende
 ....im prinzip kannst bei jeder URL ein /robots.txt anhängen und schauen ... z.b. www.heise.de/robots.txt - gibts natürlich nicht überall (nicht jeder webmaster verwendet sie) da siehst dann eh gleich die syntax und dann paßt du sie für dich an... lg, catch17 oder hier von wcm http://www.wcm.at/robots.txt lg,
____________________________________
...wenn Ihr hungert, wenn Ihr dürstet - ihr seit nicht allein, wenn Ihr krank seit wenn Ihr leidet - Ihr seit nicht allein -- ER kümmert sich auch um andere NICHT |
|
|
| Aktive Benutzer in diesem Thema: 1 (Registrierte Benutzer: 0, Gäste: 1) | |
|
|
Baum-Darstellung